第5回 N-gramã®ã—ãã¿ | gihyo.jpå‰å›žã¯å½¢æ…‹ç´ 解æžã‚’使ã†æ¤œç´¢ã‚¨ãƒ³ã‚¸ãƒ³ã®ã—ãã¿ã«ã¤ã„ã¦èª¬æ˜Žã—ã¾ã—ãŸã€‚今回ã¯ã€FINDSPOTã§ä½¿ç”¨ã—ã¦ã„ã‚‹N-gramã¨ã„ã†æ¤œç´¢ã‚¨ãƒ³ã‚¸ãƒ³ã®ã—ãã¿ã«ã¤ã„ã¦èª¬æ˜Žã—ã¾ã™ã€‚ N-gramã«ã‚ˆã‚‹è¦‹å‡ºã—語ã®åˆ‡ã‚Šå‡ºã— å‰å›žã¯ã€å½¢æ…‹ç´ 解æžã«ã‚ˆã‚‹æ¤œç´¢ã‚¨ãƒ³ã‚¸ãƒ³ã§ã¯ã€æ¤œç´¢å¯èƒ½ãªæœ€å°å˜ä½ãŒåˆ†ã‹ã¡æ›¸ãã®åˆ‡ã‚Šåˆ†ã‘å˜ä½ã¨ãªã‚‹ç‚¹ã‚’説明ã—ã¾ã—ãŸã€‚ 一方ã€N-gramを使ã£ãŸæ¤œç´¢ã‚¨ãƒ³ã‚¸ãƒ³ã§ã¯ã€å˜ç´”ã«æ–‡å—ã®ä¸¦ã³ã‚’見出ã—語ã¨ã—ã¦ã‚¤ãƒ³ãƒ‡ãƒƒã‚¯ã‚¹ã‚’作æˆã—ã¾ã™ã€‚1æ–‡å—ã‚’å…ƒã«ã‚¤ãƒ³ãƒ‡ãƒƒã‚¯ã‚¹ã‚’作æˆã™ã‚‹æ–¹æ³•ã‚’ユニグラムã€2æ–‡å—ã®ä¸¦ã³ã‚’å…ƒã«ã‚¤ãƒ³ãƒ‡ãƒƒã‚¯ã‚¹ã‚’作æˆã™ã‚‹æ–¹æ³•ã‚’ãƒã‚¤ã‚°ãƒ©ãƒ ã€3æ–‡å—ã®ä¸¦ã³ã‚’å…ƒã«ã‚¤ãƒ³ãƒ‡ãƒƒã‚¯ã‚¹ã‚’作æˆã™ã‚‹æ–¹æ³•ã‚’トリグラムã¨å‘¼ã‚“ã§ã„ã¾ã™ã€‚ 1æ–‡å—：ユニグラム2æ–‡å—：ãƒã‚¤ã‚°ãƒ©ãƒ 3æ–‡å—：トリグラムN-gramã«ã‚ˆã‚‹è¦‹å‡ºã—語ã®åˆ‡ã‚Šå‡ºã—ã¯ã€å½¢æ…‹ç´ 解æžã®ãŸã‚ã®æ–‡æ³•è§£æžã‚’ä¼´ã‚ãªã„ãŸã‚ã€ç‰¹å®šã®è‡ªç„¶è¨€èªžã«ä¾å˜ã—ãªã„ã¨ã„ã†ç‰¹å¾´ãŒã‚ã‚Šã¾ã™ã€‚ FINDS
Regexp.ja
{{#tags}}- {{label}}
{{/tags}}