Pythonã«ã‚ˆã‚‹æ—¥æœ¬èªžè‡ªç„¶è¨€èªžå‡¦ç† #pyconjp - nokunoã®æ—¥è¨˜
本日PyConJP 2011ã§ç™ºè¡¨ã—ã¾ã™ï¼ŽPyCon JP 2011Pythonã«ã‚ˆã‚‹æ—¥æœ¬èªžè‡ªç„¶è¨€èªžå‡¦ç† #pyconjp View more presentations from nokuno 内容ã¯äºˆå®šé€šã‚Šï¼ŒNLTK本ã®12ç« ã‚’ãƒ™ãƒ¼ã‚¹ã«ã—ãŸã‚‚ã®ã§ã™ï¼ŽPython ã«ã‚ˆã‚‹æ—¥æœ¬èªžè‡ªç„¶è¨€èªžå‡¦ç† よã‚ã—ããŠé¡˜ã„ã—ã¾ã™ï¼Žãƒ„イートã™ã‚‹
mecab-gree-20060411.ppt
MeCab æ±Žç”¨æ—¥æœ¬èªžå½¢æ…‹ç´ è§£æžã‚¨ãƒ³ã‚¸ãƒ³ 工藤 æ‹“ アジェンダ å½¢æ…‹ç´ è§£æžã®æŠ€è¡“ 辞書引ãã®ã‚¢ãƒ«ã‚´ãƒªã‚ºãƒ ã€ãƒ‡ãƒ¼ã‚¿æ§‹é€ 曖昧性ã®è§£æ¶ˆ MeCab ã®é–‹ç™ºè£è©± æ´å² è¨è¨ˆæ–¹é‡ 汎用テã‚スト変æ›ãƒ„ールã¨ã—ã¦ã® MeCab æã‚ã—ã汎用的! 「æ„外ãªã€ä½¿ã„æ–¹ ã“ã‚Œã‹ã‚‰ å½¢æ…‹ç´ è§£æž æ–‡ã‚’å˜èªžã«åŒºåˆ‡ã‚Šã€å“è©žã‚’åŒå®šã™ã‚‹å‡¦ç† 全文検索 Spam フィルタリング 人工無能... 以下ã®ï¼“ã¤ã®å‡¦ç† å˜èªžã¸ã®åˆ†ã‹ã¡æ›¸ã(tokenization) 活用語処ç†(stemming, lemmatization) å“è©žåŒå®š(part-of-speech tagging) ã™ã‚‚ã‚‚ åè©ž,一般,*,*,*,*,ã™ã‚‚ã‚‚,スモモ,スモモ ã‚‚ 助詞,係助詞,*,*,*,*,ã‚‚,モ,モ ã‚‚ã‚‚ åè©ž,一般,*,*,*,*,ã‚‚ã‚‚,モモ,モモ ã‚‚ 助詞,係助詞,*,*,*,*,ã‚‚,モ,モ ã‚‚ã‚‚ åè©ž,一般,*,*,*,*
TermExtract Perlã§å‡ºæ¥ã‚‹ç‰¹å¾´èªžæŠ½å‡º - プãƒã‚°ãƒ©ãƒžã«ãªã‚ŠãŸã„
Perlã®CPANモジュールを使ã£ã¦ã€ç°¡å˜ã«ãƒ™ã‚¤ã‚¸ã‚¢ãƒ³ãƒ•ã‚£ãƒ«ã‚¿ãƒ¼ã‚’使ã†æ–¹æ³•ã‚’紹介ã—ãŸã‚¨ãƒ³ãƒˆãƒªãƒ¼ãŒæ€ã„ã®ã»ã‹å¥½è©•ã§ã—ãŸã€‚ベイジアンフィルター　Perlã§ä½œã‚ŠãŸã„人ã«æ•™ãˆã¦ã‚ã’ãŸã„ã¡ã‚‡ã£ã¨ã—ãŸã“㨠　調åã«ä¹—ã£ã¦ã‚‚ã†ä¸€ã¤ã€ãŠæ°—ã«å…¥ã‚Šã®CPANモジュールã®ç´¹ä»‹ã§ã™ã€‚日本語ã®å½¢æ…‹ç´ 解æžã¨ã„ãˆã°MeCabã§ã»ã¼é–“é•ã„ãªã„ã®ã§ã™ãŒã€MeCabã¯ã‚ãã¾ã§å½¢æ…‹ç´ 解æžå™¨ã§ã™ã€‚ã¨ã„ã†ã“ã¨ã§ã€æœ€å°å˜ä½ã®å½¢æ…‹ç´ を検出ã™ã‚‹ã“ã¨ã¯å‡ºæ¥ã¾ã™ãŒã€é€£èªžç‰ã¯åˆ†è§£ã•ã‚Œã¦å‡ºã¦ãã¾ã™ã€‚（本当ã¯ã¡ã‚‡ã£ã¨å·¥å¤«ã—ãŸã‚‰å‡ºã›ã‚‹ã®ã§ã™ãŒã€ãã‚Œã¯ã¾ãŸæ¬¡å›žï¼‰ä¾‹ãˆã°ã€ã€Œé›†åˆçŸ¥ã€ã¨ã„ã†è¨€è‘‰ãŒå‡ºã¦ããŸã‚‰ã€ä¸‹ã®ã‚ˆã†ã«åˆ†è§£ã•ã‚Œã¦å‡ºã¦ãã¾ã™ã€‚ é›†åˆ åè©ž,サ変接続,*,*,*,*,集åˆ,シュウゴウ,シューゴー 知 åè©ž,一般,*,*,*,*,知,ãƒ,ム使ã„æ–¹ã«ã‚‚よりã¾ã™ãŒã€é›†åˆçŸ¥ã¨ã„ã†è¨€è‘‰ã§å–ã‚ŠãŸã„å ´åˆã‚‚多ã„ã¨æ€ã„ã¾ã™ã€‚以å‰ã€Yahoo!APIã¨çµ„ã¿åˆã‚ã›
MeCabã®è¾žæ›¸ã«ã¯ã¦ãªã‚ãƒ¼ãƒ¯ãƒ¼ãƒ‰ã‚’è¿½åŠ ã—よㆠ- ä¸å¯è¦–点
MeCabã¯å½¢æ…‹ç´ 解æžã®ãŸã‚ã®ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ã§ã™ã€‚日本語を分ã‹ã¡æ›¸ãã™ã‚‹ãŸã‚ã«ä½¿ã‚れるもã®ã¨ã—ã¦ã¯æœ€ã‚‚人気ã®é«˜ã„ã‚‚ã®ã ã¨æ€ã‚ã‚Œã¾ã™ãŒã€ãƒãƒ£ãƒƒãƒˆã‚„掲示æ¿ã«æ›¸ãè¾¼ã¾ã‚Œã‚‹ã‚ˆã†ãªå´©ã—ãŸæ—¥æœ¬èªžã‚„ã€æ£ã—ã書ã‹ã‚ŒãŸæ—¥æœ¬èªžã§ã‚‚新語を期待ã—ãŸé€šã‚Šã«åˆ†ã‹ã¡æ›¸ãã—ã¦ãã‚Œãªã„ã“ã¨ãŒã‚ã‚Šã¾ã™ã€‚ã“ã‚Œã¯MeCabã®å†…部ã§ä½¿ã‚ã‚Œã¦ã„る辞書ãŒä¸€èˆ¬çš„ãªè¨€è‘‰ã‚’æƒ…å ±æºã¨ã—ã¦ã„ã‚‹ã‚ã‘ã§ã¯ãªã„ã“ã¨ã«é–¢ä¿‚ãŒã‚ã‚Šã¾ã™ã€‚MeCabã¨ã„ã†ã‹ã€ã‚ˆã‚Šä¸€èˆ¬çš„ãªè©±ã§ã™ãŒä»¥ä¸‹ã®ã‚ˆã†ãªèªè˜ãŒä¸€èˆ¬çš„ã‹ã¨æ€ã‚ã‚Œã¾ã™ã€‚ ã¨ã„ã†ã®ã‚‚ã€ä¸€ç•ªåºƒã使ã‚ã‚Œã¦ã„ã‚‹ã§ã‚ã‚ã†è‡ªç„¶è¨€èªžå‡¦ç†æŠ€è¡“ã¯å½¢æ…‹ç´ 解æž(å˜èªžåˆ†ã‹ã¡æ›¸ãã€ã¨è¨€ã£ãŸã»ã†ãŒã„ã„ã®ã‹ã‚‚ã—ã‚Œãªã„)ã§ã‚ã‚ã†ãŒã€ã“ã‚Œã¯ç¾åœ¨99%ãらã„ã®ç²¾åº¦ã«ãªã£ã¦ã„ã¦ã€ã™ã§ã«äººé–“ãŒã‚„るよりé™ã‹ã«é«˜ç²¾åº¦ã§è¡Œãˆã‚‹ã®ã ãŒã€ã“ã‚Œã ã‘高ã„精度ãŒå‡ºã›ã‚‹ã®ã¯æ–°èžè¨˜äº‹ã‚’相手ã«ã—ãŸã¨ãã ã‘ã§ã‚ã£ã¦ã€ãã‚Œã¯æ–°èžè¨˜äº‹ã‚’コーパスã¨ã—ã¦ç”¨ã„る機械å¦ç¿’ã«ã‚ˆã‚Šå½¢æ…‹ç´ 解
1
ランã‚ング
メンテナンス
ãŠçŸ¥ã‚‰ã›
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
{{#tags}}- {{label}}
{{/tags}}