「KOIL FACTORY PROã€ã§æ–°ãŸãªè¦–点ã§ã¤ãる「衣食ä½éŠã€ã®ä½“験型フェス「ã»ã«ã‚ƒã‚‰ã‚‰+らDAYã€ãŒ10月29æ—¥ã¨30æ—¥ã«é–‹å‚¬
rubyneko - Rubyã§ç°¡å˜ã«å½¢æ…‹ç´ 解æžçµæžœã‚’使ã†
「KOIL FACTORY PROã€ã§æ–°ãŸãªè¦–点ã§ã¤ãる「衣食ä½éŠã€ã®ä½“験型フェス「ã»ã«ã‚ƒã‚‰ã‚‰+らDAYã€ãŒ10月29æ—¥ã¨30æ—¥ã«é–‹å‚¬
Google Japan Blog: 大è¦æ¨¡æ—¥æœ¬èªž n-gram データã®å…¬é–‹
çªç„¶ã§ã™ãŒã€ç©´åŸ‹ã‚クイズã§ã™ã€‚下線部ã«å…¥ã‚‹å˜èªžã¯ãªã‚“ã§ã—ょã†? グーグルã§_____ ãŠãらãã€ã€Œæ¤œç´¢ã€ã€Œèª¿ã¹ã‚‹ã€ã€ŒæŽ¢ã™ã€ã¨ã„ã£ãŸå˜èªžã‚’æ€ã„ã¤ãã®ã§ã¯ãªã„ã§ã—ょã†ã‹ï¼Ÿ 実際ã«ã€Webã«ã‚るドã‚ュメントをãã¾ãªã調ã¹ã€ã€Œã‚°ãƒ¼ã‚°ãƒ«ã§ã€ã®å¾Œã«ãã‚‹å˜èªžã‚’調ã¹ã‚‹ã¨ã€ã€Œæ¤œç´¢ã€ãŒ1ä½ã§ã‚ã‚‹ã¨ãŒã‚ã‹ã‚Šã¾ã™ã€‚ 一般ã«ã€ç›´å‰ã®(N-1)個ã®å˜èªžã‚’見ã¦ã€æ¬¡ã®å˜èªžã‚’予測ã™ã‚‹ãƒ¢ãƒ‡ãƒ«ã‚’N-gram言語モデルã¨ã„ã„ã¾ã™ã€‚ã•ãã»ã©ã¯ã€ã€Œã‚°ãƒ¼ã‚°ãƒ«ã€ 㨠「ã§ã€ã®2å˜èªžã‹ã‚‰æ¬¡ã‚’予想ã—ã¦ã„ã‚‹ã®ã§ã€3-gram言語モデルã®ä¾‹ã¨ãªã‚Šã¾ã™ã€‚ç¾æ™‚点ã®å˜èªžãŒã€ç›´å‰ã®(N-1)個ã®ã¿ã«å½±éŸ¿ã‚’å—ã‘ã‚‹ã¨ã„ã†ä»®èª¬ã¯ã€ä¸€è¦‹ç¾å®Ÿé›¢ã‚Œã—ã¦ã„るよã†ã§ã™ãŒã€å®Ÿéš›ã«ã¯éžå¸¸ã«æœ‰åŠ¹ãªå ´åˆã‚‚多ãã€ã‹ãªæ¼¢å—変æ›ã€OCRã®ã‚¨ãƒ©ãƒ¼è¨‚æ£ã€æ©Ÿæ¢°ç¿»è¨³ã€éŸ³å£°èªè˜ãªã©ã«åºƒã用ã„られã¦ã„ã¾ã™ã€‚ãŸã¨ãˆã°ã€éŸ³å£°èªè˜ã®å ´åˆã€ãƒŽã‚¤ã‚ºç‰ã§ç¾æ™‚点ã®å˜èªžã‚’システムãŒèžãå–ã‚Œãªãã¦ã‚‚ã€è¨€èªžãƒ¢ãƒ‡ãƒ«
Javascriptã§diffã‚‹ ( with å½¢æ…‹ç´ è§£æž ) (nakatani @ cybozu labs)
Javascript 㧠diff ã¨ã„ã†ã®ã¯ã„ãã¤ã‹è©¦ã•ã‚ŒãŸä¾‹ã¯ã‚るよã†ã§ã™ãŒã€ã¾ã ã“ã‚Œã¨ã„ã£ãŸæ±ºå®šæ‰“ã¯å‡ºã¦ã„ãªã„様åã§ã™ã€‚ 実㯠diff ã¯è¦‹ãŸç›®ã»ã©è»½ã„処ç†ã§ã¯ãªã„ã®ã§ã€Javascript ã«ã‚„らã›ã‚‹ã®ã¯ã“ã‚ŒãŒçµæ§‹å¤§å¤‰â€¦â€¦ diff ã®è¨ˆç®—é‡ã¯ã€ãŠãŠã–ã£ã±ã«è¨€ã†ã¨æ¯”較対象ã®è¦ç´ æ•°ã®äºŒä¹—ã«æ¯”例ã—（実際ã«ã¯ãれよりå°ã•ãã™ã‚‹ã“ã¨ãŒã§ãã‚‹ã®ã§ã™ãŒã€ã¾ã‚話ã®ã‚¤ãƒ¡ãƒ¼ã‚¸ã¨ã—ã¦ï¼‰ã€ã‹ã¤ãƒ¡ãƒ¢ãƒªã‚’大é‡ã«æ¶ˆè²»ã™ã‚‹ã®ã§ã€ãƒãƒƒãƒçš„ãªå‡¦ç†ã«æœ€é©åŒ–ã•ã‚Œã¦ã„ãªã„ Javascript ã«ã¯ã©ã†ã—ã¦ã‚‚è·ãŒé‡ã„ã‚‚ã®ã¨ãªã£ã¦ã—ã¾ã„ã¾ã™ã€‚ 比較対象ã®è¦ç´ 数を減らã›ã°å½“然計算é‡ã¯æ¸›ã‚Šã¾ã™ãŒã€è¡Œå˜ä½ã§æ¯”較ã—ã¦ã‚‚ã‚ã¾ã‚Šå¬‰ã—ããªã„（ã‚ã–ã‚ã– Javascript ã§å‡¦ç†ã™ã‚‹ã¨ã„ã†ã“ã¨ã¯è‡ªç„¶æ–‡ãŒå¯¾è±¡ã¨æ€ã£ã¦è‰¯ã„ã§ã—ょã†ï¼‰ã€‚最å°ã®æ–‡å—å˜ä½ã ã¨ã‚®ãƒ–アップ。 ã¨ã„ã†ã“ã¨ã¯å½¢æ…‹ç´ 解æžã§åˆ†ã‹ã¡æ›¸ãã—ã¦ã€å˜èªžå˜ä½ã§ diff ã™ã‚‹ã®ãŒ J
[ã‚’] å½¢æ…‹ç´ è§£æžã¨æ¤œç´¢APIã¨TF-IDFã§ã‚ーワード抽出
å½¢æ…‹ç´ è§£æžã¨æ¤œç´¢APIã¨TF-IDFã§ã‚ーワード抽出 2005-10-12-1 [Programming][Algorithm] å½¢æ…‹ç´ è§£æžå™¨ã¨ Yahoo! Web 検索 API 㨠TF-IDF を使ã£ã¦ã‚ーワード抽 出ã™ã‚‹ã¨ã„ã†å…ˆæ—¥ã®æ¤œç´¢ä¼šè°ã§ã®ãƒ‡ãƒ¢ã€KEYAPI[2005-09-30-3]。 教科書ã«è¼‰ã£ã¦ã„るよã†ãªåŸºæœ¬ä¸ã®åŸºæœ¬ã§ã™ãŒã€ã‚らãŸã‚ã¦ã‚¨ãƒƒã‚»ãƒ³ã‚¹ã‚’ ç°¡å˜ãªä¾‹ã§è§£èª¬ã—ãŸã„ã¨æ€ã„ã¾ã™ã€‚ 目的：ã‚ーワード抽出対象テã‚ストã‹ã‚‰ã€ãã®ãƒ†ã‚ストを代表ã™ã‚‹ ã‚ーワードを抽出ã—ã¾ã™ã€‚TF-IDF ã¨ã„ã†æŒ‡æ¨™ã‚’用ã„ã¾ã™ã€‚（ã“ã®å€¤ãŒå¤§ ãã„ã»ã©ãã®å˜èªžãŒä»£è¡¨ã‚ーワードã£ã½ã„ã¨ã„ã†ã“ã¨ã§ã‚ˆã‚ã—ã。） TF-IDF を計算ã™ã‚‹ãŸã‚ã«ã¯ã€ (1) ã‚ーワード抽出対象テã‚ストä¸ã®ä»£è¡¨ã‚ーワード候補出ç¾æ•° (TF)〠(2) å…¨ã¦ã®ãƒ‰ã‚ュメント数 (N)〠(3) 代表ã‚ーワード
rchasen: ChaSenã®æ–°ãŸãªRubyãƒã‚¤ãƒ³ãƒ‡ã‚£ãƒ³ã‚° - llameradaã®æ—¥è¨˜
SWIGã®ç·´ç¿’ã‚‚å…¼ãã¦ã€ChaSenã®Rubyãƒã‚¤ãƒ³ãƒ‡ã‚£ãƒ³ã‚°ã‚’書ã„ã¦ã¿ãŸã€‚ ChaSenã®Rubyãƒã‚¤ãƒ³ãƒ‡ã‚£ãƒ³ã‚°ã¯æ—¢ã«å…¬é–‹æ¸ˆã¿ã®ã‚‚ã®ãŒã‚る。ã—ã‹ã—ã€ãƒ¡ãƒ³ãƒ†ãƒŠãƒ³ã‚¹ã•ã‚Œã¦ãŠã‚‰ãšã€ã‚³ãƒ³ãƒ‘イルã«ä¿®æ£ä½œæ¥ãŒå¿…è¦ã ã£ãŸã€‚ã¾ãŸã€ChaSenãŒæä¾›ã™ã‚‹APIã®å†…ã€ä¸€éƒ¨ã—ã‹åˆ©ç”¨ã§ããªã‹ã£ãŸã€‚ 今回ã€å…¬é–‹ã—ãŸãƒã‚¤ãƒ³ãƒ‡ã‚£ãƒ³ã‚°ã§ã¯ã€ã“れらã®å•é¡Œã‚’解決ã—ãŸï¼ˆã¯ãšã§ã‚る）。 ダウンãƒãƒ¼ãƒ‰ã¯ä¸‹è¨˜ã®ãƒ—ãƒã‚¸ã‚§ã‚¯ãƒˆãƒšãƒ¼ã‚¸ã‹ã‚‰ã€‚ http://sourceforge.jp/projects/rchasen/ SWIGを使ã£ãŸã®ã§ã€javaã‚„pythonãƒã‚¤ãƒ³ãƒ‡ã‚£ãƒ³ã‚°ã‚‚作æˆå¯èƒ½ã§ã™ã€‚暇ãŒã§ããŸã‚‰ãƒãƒ£ãƒ¬ãƒ³ã‚¸ã—ã¦ã¿ã¾ã™ã€‚
人工無脳ã¯è€ƒãˆã‚‹
人工無脳ã€ã¾ãŸã¯ãƒãƒ£ãƒƒãƒˆãƒœãƒƒãƒˆã¯äººé–“ã®ã‚ˆã†ãªçŸ¥èƒ½ã‚’æŒã£ã¦ã„ã¾ã›ã‚“。 ã«ã‚‚ã‹ã‹ã‚らãšç§é”ã¯å½¼ã‚‰ã¨ã®ä¼šè©±ã«é…力を感ã˜ã€ç™’ã‚„ã•ã‚Œã€ 時ã«ã¯æ„Ÿæƒ…ã‚’æºã•ã¶ã‚‰ã‚Œã¾ã™ã€‚ ãã‚Œã¯ãªãœãªã®ã‹ã€‚ ãƒãƒ£ãƒƒãƒˆãƒœãƒƒãƒˆã¨ã¯ä½•ãªã®ã‹ã€‚ 一見å˜ç´”ã«è¦‹ãˆã‚‹ãƒ—ãƒã‚°ãƒ©ãƒ ã®å¥¥ã«æ½œã‚€ã€ãƒ‡ã‚£ãƒ¼ãƒ—ãªä¸–界を探りã¾ã™ã€‚
1
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
Loading...
http://antipop.gs/mt/2004/04/15/000330
http://collisions.dotimpac.to/works/web/dqspell.html
{{#tags}}- {{label}}
{{/tags}}