NLTK Bookã§æ•™å¸«ãªã—å½¢æ…‹ç´ è§£æž - nokunoã®æ—¥è¨˜æ„外ã¨çŸ¥ã‚‰ã‚Œã¦ã„ãªã„よã†ãªã®ã§ã€NLTK Bookã®Segmentationã®ç¯€ã«ã‚る教師ãªã—å½¢æ…‹ç´ è§£æžï¼ˆå˜èªžåˆ†å‰²ï¼‰ã«ã¤ã„ã¦ç´¹ä»‹ã—ã¦ã¿ã¾ã™ã€‚ ã“ã®æ‰‹æ³•ã§ã¯ã€ãƒ†ã‚ストを「å˜èªžã®è¾žæ›¸ã€ã¨ã€Œå˜èªžIDã®åˆ—ã€ã§è¡¨ã—ãŸã¨ãã«ãã®åˆè¨ˆã‚µã‚¤ã‚ºãŒæœ€å°ã«ãªã‚‹ã‚ˆã†ã«å˜èªžåˆ†å‰²ã®ä½ç½®ã‚’最é©åŒ–ã—ã¾ã™ã€‚言ã„æ›ãˆã‚Œã°ã€å˜èªžã®å‡ºç¾ç¢ºçŽ‡ã«ä¸€æ§˜åˆ†å¸ƒã‚’仮定ã—ã¦åœ§ç¸®ã—ãŸã¨ãã«ã€ãã®åœ§ç¸®åŠ¹çŽ‡ã‚’最大ã¨ã™ã‚‹ã‚ˆã†ã«å˜èªžã‚’分割ã—ã¾ã™ã€‚æŒæ©‹ã•ã‚“ã®ç ”究よりã¯ã‚‹ã‹ã«å˜ç´”ãªãƒ¢ãƒ‡ãƒ«ã§ã™ãŒã€åŽŸç†ã¨ã—ã¦ã¯è¿‘ã„ã‚‚ã®ã«ãªã‚Šã¾ã™ã€‚最é©åŒ–ã«ã¯ã‚·ãƒŸãƒ¥ãƒ¬ãƒ¼ãƒ†ãƒƒãƒ‰ã‚¢ãƒ‹ãƒ¼ãƒªãƒ³ã‚°ï¼ˆç„¼ããªã¾ã—法）を使ã£ã¦ã„ã¦ã€é©å½“ã«åˆæœŸåŒ–ã—ã¦ã‹ã‚‰ãƒ©ãƒ³ãƒ€ãƒ ã«å˜èªžåˆ†å‰²ä½ç½®ã‚’変ãˆã¦ã€è©•ä¾¡é–¢æ•°ã«ã‹ã‘ã¦è‰¯ã„çµæžœã«ãªã£ãŸã‚‰æŽ¡ç”¨ã™ã‚‹ã€ã¨ã„ã†æ“作を繰り返ã—è¡Œã†ã‚‚ã®ã§ã™ã€‚ NLTK Bookã§ã¯ã€è‹±èªžã®ãƒ†ã‚ストã‹ã‚‰ã‚¹ãƒšãƒ¼ã‚¹ã‚’å–り除ã„ãŸã‚‚ã®ã‚’用ã„ã¦å˜èªžã‚’抽出ã—ã¦ã„ã¾ã™ã€‚ã“ã‚Œã¯ã‹ãªã‚Šæ£æ„çš„ã«é¸ã°ã‚ŒãŸãƒ†ã‚ストã§ã€
æ—¥æœ¬èªžå½¢æ…‹ç´ è§£æžAPIã¨ãƒžãƒƒã‚·ãƒ¥ã‚¢ãƒƒãƒ—
Yahoo!デベãƒãƒƒãƒ‘ーãƒãƒƒãƒˆãƒ¯ãƒ¼ã‚¯ã«ãƒ†ã‚スト解æžAPIãŒç™»å ´ï¼
ä¸é‡Œä¸€æ—¥è¨˜: コンテンツマッãƒã‚¨ãƒ³ã‚¸ãƒ³ã‚’自作ã—ãŸ
http://www.ryo.com/ryo/2005/06/01/39/
{{#tags}}- {{label}}
{{/tags}}