Elasticsearch: N-gram tokenizer 㨠N-gram token filter ã®æŒ™å‹•ã®é•ã„ - Unyablog.ã“ã®è¨˜äº‹ã¯ KMC advent calendar 8日目ã®è¨˜äº‹ã¨ã„ã†ã“ã¨ã«ã—ã¦ã„ã¾ã™ã€‚ adventar.org KMC ã§ã¯éƒ¨å†…ドã‚ュメント検索システム㧠Elasticsearch を使用ã—ã¦ã„る。最近 Elasticsearch ã®ãƒãƒ¼ã‚¸ãƒ§ãƒ³ã‚’上ã’る準備をã—ã¦ã„ã¦ã€è¨å®šã®è¦‹ç›´ã—ã®ä¸ã§ N-gram token filter を使ã£ã¦ã¿ãŸã‚‰æƒ³å®šã¨é•ã£ãŸæŒ™å‹•ã‚’ã—ãŸã®ã§ãƒ¡ãƒ¢ã€‚ Disclaimer 7.16 ã§ç¢ºèª 検索çµæžœã« False positive, False negative ãŒãªã„ã‹ã®è¦–点ã§è¦‹ã¦ã„る。スコアリング関係ã¯è¦‹ã¦ã„ãªã„。 Edge n-gram ã€CJK bi-gram ã«ã¤ã„ã¦ã¯è¦‹ã¦ã„ãªã„ エラサーã®ãƒ—ãƒã§ã¯ãªã„ã®ã§é–“é•ã£ã¦ã„ãŸã‚‰æ•™ãˆã¦ä¸‹ã•ã„… TL;DR N-gram tokenizer ã¯ã‚¤ãƒ¡ãƒ¼ã‚¸é€šã‚Šã€ä¸Žãˆã‚‰ã‚ŒãŸæ–‡å—列を N-gram ã§å„ Token ã«åˆ†
How to implement Japanese full-text search in Elasticsearch
{{#tags}}- {{label}}
{{/tags}}