word2vec for Lucene ã”紹介 | é–¢å£å®å¸ã®Luceneブãƒã‚°
一定期間更新ãŒãªã„ãŸã‚広告を表示ã—ã¦ã„ã¾ã™
Solrを使ã£ã¦å°‚門用語抽出 | é–¢å£å®å¸ã®Luceneブãƒã‚°
一定期間更新ãŒãªã„ãŸã‚広告を表示ã—ã¦ã„ã¾ã™
é–¢å£å®å¸ã®Luceneブãƒã‚°
一定期間更新ãŒãªã„ãŸã‚広告を表示ã—ã¦ã„ã¾ã™
オープンソースã®æ¤œç´¢ã‚¨ãƒ³ã‚¸ãƒ³ã€ŒApache Lucene 5.0ã€ãƒªãƒªãƒ¼ã‚¹ | OSDN Magazine
オープンソースã®å…¨æ–‡æ¤œç´¢ã‚¨ãƒ³ã‚¸ãƒ³ãƒ©ã‚¤ãƒ–ラリ「Apache Luceneã€é–‹ç™ºãƒãƒ¼ãƒ ã¯2月20æ—¥ã€æœ€æ–°ç‰ˆã¨ãªã‚‹ã€ŒApache Lucene 5.0ã€ãŠã‚ˆã³Luceneベースã®NoSQL検索プラットフォーム「Apache Solr 5.0ã€ã‚’リリースã—ãŸã€‚ Apache Luceneã¯Javaã§ä½œæˆã•ã‚ŒãŸæ¤œç´¢ã‚¨ãƒ³ã‚¸ãƒ³ã€‚1時間ã‚ãŸã‚Š150GB以上ã¨ã„ã†ã‚¤ãƒ³ãƒ‡ãƒƒã‚¯ã‚¹ã‚¹ãƒ«ãƒ¼ãƒ—ットやランク付ã‘ã€å¤šæ•°ã®ã‚¯ã‚¨ãƒªã‚¿ã‚¤ãƒ—サãƒãƒ¼ãƒˆã€ãƒ•ã‚£ãƒ¼ãƒ«ãƒ‰ã«ã‚ˆã‚‹ã‚½ãƒ¼ãƒˆã€èª¤å—補完ã¨ã„ã£ãŸæ©Ÿèƒ½ã‚’有ã—ã€å…¨æ–‡æ¤œç´¢ã‚’å¿…è¦ã¨ã™ã‚‹ã»ã¼ã™ã¹ã¦ã®ã‚¢ãƒ—リケーションã§åˆ©ç”¨ã§ãã‚‹ã¨ã„ã†ã€‚Solrã¯Luceneã®ã‚µãƒ–プãƒã‚¸ã‚§ã‚¯ãƒˆã§ã€Luceneをベースã¨ã—ãŸã‚¨ãƒ³ã‚¿ãƒ¼ãƒ—ライズå‘ã‘ã®æ¤œç´¢ãƒ—ラットフォーム。 Apache Lucene 5.0ã¯ã€2012å¹´10月ã«å…¬é–‹ã•ã‚ŒãŸãƒãƒ¼ã‚¸ãƒ§ãƒ³4.0ã«ç¶šãメジャーãƒãƒ¼ã‚¸ãƒ§ãƒ³ã¨ãªã‚‹ã€‚インデックスã®å®‰å…¨æ€§å¼·åŒ–ã¨ãƒ’ープ使用
ヒット件数ãŒæ•°å万件を超ãˆã‚‹ã‚ˆã†ãªå ´åˆã§ã‚‚使ãˆã‚‹ã€‚æ–°ã—ãインデã‚シングã—ãŸãƒ‰ã‚ュメントを検索çµæžœã®ä¸Šä½ã«è¡¨ç¤ºã™ã‚‹ï¼’ã¤ã®æ–¹æ³•ã€‚ - Solr, Python, MacBook Air in Shinagawa Seaside
æ–°ã—ãインデã‚シングã•ã‚ŒãŸãƒ‰ã‚ュメントを検索çµæžœã®ä¸Šä½ã«è¡¨ç¤ºã—ãŸã„ã¨ã„ã†ãƒ‹ãƒ¼ã‚ºã¯å‰²ã¨ã‚ˆãã‚ã‚‹ã¨æ€ã„ã¾ã™ã€‚ フレッシュãƒã‚¹ãƒ–ーストã¨å‘¼ã°ã‚Œã‚‹æ‰‹æ³•ã§ã™ã€‚ Solr ã®å ´åˆ TIMESTAMP ãªã©ã®æ—¥ä»˜ã§ã‚½ãƒ¼ãƒˆã™ã‚‹ã“ã¨ã‚‚ã§ãã‚‹ã®ã§ã™ãŒ Solr ã¯ã‚½ãƒ¼ãƒˆãŒã‚ã¾ã‚Šä¸Šæ‰‹ã§ã¯ã‚ã‚Šã¾ã›ã‚“。 時間ã¨ã‚·ã‚¹ãƒ†ãƒ リソースを大é‡ã«æ¶ˆè²»ã—ã¾ã™ã€‚ ヒット件数ãŒæ•°å万件を超ãˆã‚‹ã‚ˆã†ãªå ´åˆã«ã¯ã‚ã¾ã‚Šä½¿ã„ãŸãã‚ã‚Šã¾ã›ã‚“。 æ£ç¢ºã«ã‚½ãƒ¼ãƒˆã•ã‚Œãªãã¦ã‚‚最近インデã‚シングã•ã‚ŒãŸãƒ‰ã‚ュメント㌠ã ã„ãŸã„上ä½ã«ãã‚Œã°ã„ã„ã®ã§ã‚ã‚Œã°æ—¥ä»˜ã§ãƒ–ーストã™ã‚‹æ–¹æ³•ãŒã‚ã‚Šã¾ã™ã€‚ 1ã¤ã‚㯠クエリタイプ㌠dismax ã®å ´åˆã§ã€BoostQuery を使ã†æ–¹æ³•ã§ã™ã€‚ bq ã§æŒ‡å®šã—ã¾ã™ã€‚ bq=TIMESTAMP:[NOW/DAY-7DAY TO NOW/DAY]^20000 ã“ã®ä¾‹ã§ã¯1週間以内ã«ã‚¤ãƒ³ãƒ‡ã‚シングã•ã‚ŒãŸãƒ‰ã‚ュメントãŒãƒ–ーストã•ã‚Œã¾
Lucene / Solr - Qiita Advent Calendar 2014 - Qiita
Apache Lucene / Solr ã«ã¤ã„ã¦æƒ…å ±å…±æœ‰ã™ã‚‹ Advent Calendar ã§ã™ã€‚ Tips, ãƒãƒžã£ãŸã“ã¨, ã‚„ã£ã¦ã¿ãŸã“ã¨, マニアックãªã“ã¨, 関連プãƒãƒ€ã‚¯ãƒˆ, ãªã‚“ã§ã‚‚æ“è¿Žã§ã™ã€‚
solr-vs-elasticsearch.com - solr vs elasticsearch リソースãŠã‚ˆã³æƒ…å ±
Get a new domain registered at NameSilo.com. Find out who owns any domain name with the WHOIS tool. This webpage was generated by the domain owner using Sedo Domain Parking. Disclaimer: Sedo maintains no relationship with third party advertisers. Reference to any specific service or trade mark is not controlled by Sedo nor does it constitute or imply its association, endorsement or recommendation.
Solrã¨Elasticsearchを比ã¹ã¦ã¿ã‚ˆã†
Solrã¨Elasticsearchã«é–¢ã—ã¦ç‹¬è‡ªã®è¦³ç‚¹ã§æ¯”較ã—ã¦ã¾ã¨ã‚ã¦ã„ã¾ã™ã€‚ （実際ã«æ¯”較検討ãŒå¿…è¦ãªå ´åˆã¯ã€ã”自身ã§å®Ÿæ–½ã•ã‚Œã‚‹ã®ãŒè‰¯ã„ã¨æ€ã„ã¾ã™ï¼‰
Solrã®Spatial Searchを試ã—ã¦ã¿ãŸ - Y's note
å‰æ›¸ã 10代ã®é ƒã¯(ゴースト)ライターã¨ã„ã†è·æ¥ã«æ†§ã‚Œã¦ã„ãŸæ™‚期もã‚ã‚Šã¾ã—ãŸ@yutakikuchi_ã§ã™ã€‚ Geospatial Indexes and Queries ― MongoDB Manual 2.4.9 MySQL :: MySQL 4.1 リファレンスマニュアル :: 10.6.1 空間インデックスã®ä½œæˆ ä½ç½®æƒ…å ±Indexã‚’MongoDBã§ç®¡ç†ã™ã‚‹æ‰‹æ³•ã«ã¤ã„ã¦ã¯å‰ã«èª¿æŸ»æ¸ˆã¿ã§ã€mysqlã«ã‚‚Spatialindexã¯ã‚ã¾ã‚Šæ™®åŠã—ã¦ã„ãªã„å°è±¡ã€ã¨ã„ã†ã“ã¨ã§...今日ã¯æ¤œç´¢Solrã®Spatial Searchã«ã¤ã„ã¦èª¿ã¹ã¦ã¿ã¾ã™ã€‚最終的ã«ã¯Fessã‚„Nutchã§WebPageã‚’Crawlingã—ã¦å¾—ãŸä½æ‰€ãƒ‡ãƒ¼ã‚¿ã‚’Geocodingã§Lat/Lngデータã«å¤‰æ›ã—ã¦è‡ªå‰ã®Serverã«Indexingã—ã¦ã„ã事を考ãˆã¦ãŠã‚Šã€ãã®å‰æ®µéšŽã®ä½œæ¥ã§ã™ã€‚Solrã‚’é¸ã¶ç†ç”±ã§ã™ãŒSpa
Solrã§æ¤œç´¢ã™ã‚‹æ™‚ã«boost値をè¨å®šã™ã‚‹(Extended DisMax)
â– Document Boost Javaã§Solrã«ã‚¤ãƒ³ãƒ‡ã‚¯ã‚·ãƒ³ã‚°ã™ã‚‹ãƒ—ãƒã‚°ãƒ©ãƒ を書ã時ã«ã€ SolrInputDocumentã£ã¦ã„ã†ã‚¯ãƒ©ã‚¹ã‚’使ã£ãŸã‚Šã—ã¾ã™ãŒã€ 特定ã®ãƒ•ã‚£ãƒ¼ãƒ«ãƒ‰ã®é‡è¦åº¦ã‚’上ã’ãŸã„ãªã€ã¨ã„ã†æ™‚㯠↓ã®ãƒ¡ã‚½ãƒƒãƒ‰ã‚’使ã£ã¦ç¬¬3引数ã«floatã§é‡ã¿ä»˜ã‘ã—ã¾ã™(デフォルトã¯1.0) addField(java.lang.String, java.lang.Object, float) コレã§ã‚¤ã‚¤ã˜ã‚ƒã‚“ã£ã¦è¨€ã‚れれã°ãã‚Œã¾ã§ãªã®ã§ã™ãŒã€ é‡è¦åº¦ã‚’コãƒã‚³ãƒå¤‰ãˆã¦ã€ã©ã‚“ãªæ„Ÿã˜ã«å½±éŸ¿ãŒã‚ã‚‹ã‹ç¢ºèªã—ãªãŒã‚‰æ¤œç´¢ã—ãŸã„時ã«ã€ 都度ドã‚ュメントをインデックスã—ç›´ã—ã¦ã€ã€ã£ã¦ã‹ãªã‚Šé¢å€’ãªäº‹ã«ãªã‚Šã¾ã™ã€‚ â– Query Boost インデックスã™ã‚‹æ™‚ã«boost値をè¨å®šã™ã‚‹ã®ãŒé¢å€’ãªäº‹ã«ãªã‚‹ã‚“ã ã£ãŸã‚‰ã€ 検索ã™ã‚‹æ™‚ã«è¨å®šã—ã¦ã—ã¾ãˆã°ã‚¤ã‚¤ã˜ã‚ƒãªã„ã€ã¨ã„ã†ã‚¢ãƒ¬ã§ã™ã€‚ DisMaxã¨ã„ã†ã‚³ãƒ³ãƒãƒ¼ãƒãƒ³ãƒˆã‚’
強烈ã«ç´ 晴らã—ã„プãƒãƒ€ã‚¯ãƒˆã«å¤‰è²Œã—㟠Apache Solr - Solr 4.0 ç™»å ´ - ã«ã‚‡ãã«ã‚‡ãブãƒã‚°
Apache Solr 4.0 ãŒãƒªãƒªãƒ¼ã‚¹ã•ã‚ŒãŸã€‚ 本記事ã§ã¯ Solr 4.0 ã®æ–°æ©Ÿèƒ½ã‚„改善ã•ã‚ŒãŸç‚¹ã®ã†ã¡æ°—ã«ãªã‚‹ã‚‚ã®ã‚’紹介ã™ã‚‹ã€‚ æ¦‚è¦ Solr 4.0 ã§ã¯ã€ä¸‹è¨˜ã®å¤‰æ›´ãŒå…¥ã‚‹ã€‚ 83 個ã®æ–°æ©Ÿèƒ½ 13 個ã®æœ€é©åŒ– 121 個ã®ãƒã‚°æ”¹ä¿® Solr 4.0 ã¯ãƒ¡ã‚¸ãƒ£ãƒ¼ãƒãƒ¼ã‚¸ãƒ§ãƒ³ã‚¢ãƒƒãƒ—ã«ãµã•ã‚ã—ã„ã€éžå¸¸ã«å¼·åŠ›ãªãƒªãƒªãƒ¼ã‚¹ã¨ãªã‚‹ã€‚ SolrCloud Solr 4.0 ã®æ•°ã‚る新機能ã®ã†ã¡ã®ç›®çŽ‰æ©Ÿèƒ½ã€‚ SolrCloud ã¨ã„ã†åå‰ã‹ã‚‰æŽ¨æ¸¬ã§ãるよã†ã«ã€Solr ã®åˆ†æ•£æ§‹æˆãŒè¡Œãˆã‚‹ã‚ˆã†ã«ãªã£ãŸã€‚ã¨ã¯ã„ã†ã‚‚ã®ã®ã€Solr 3.6 以å‰ã§ã‚‚レプリケーションã¯è¡ŒãˆãŸã®ã ãŒã€Solr 4.0 ã¯ä¸€å‘³ã¡ãŒã†ã€‚ 今ã¾ã§ã‚ˆã‚Šæ–然賢ããªã£ãŸã€‚シャーディングもクラスタリングも簡å˜ãªè¨å®šã§è¡Œã†ã“ã¨ãŒã§ãる。インデクス書ãè¾¼ã¿ã‚‚複数ノードã‹ã‚‰è¡Œãˆã‚‹ã€‚ãã—ã¦ãªã«ã‚ˆã‚Šè‡ªå‹•ãƒ•ã‚§ã‚¤ãƒ«ã‚ªãƒ¼ãƒãƒ¼ãŒã§ãるよã†ã«ãªã£ãŸã€‚ ã•ã‚‰ã«
全文検索エンジン Solr ã®ãƒ‘フォーマンスãƒãƒ¥ãƒ¼ãƒ‹ãƒ³ã‚°ã«ã¤ã„㦠- ã«ã‚‡ãã«ã‚‡ãブãƒã‚°
ã“ã®è¨˜äº‹ã¯å¤ããªã‚Šã¾ã—ãŸã€‚æ–°ã—ã„知見ã¯ä¸‹è¨˜ã‚’å‚照。aoking.hatenablog.jp æ¦‚è¦ å…¨æ–‡æ¤œç´¢ã‚¨ãƒ³ã‚¸ãƒ³ Solr を使用ã—ã¦ã„ã¦ã€ãƒ‘フォーマンスãƒãƒ¥ãƒ¼ãƒ‹ãƒ³ã‚°ã«å››è‹¦å…«è‹¦ã—ãŸè©±ã€‚ ã“ã“ã§ã¯ã€æ¤œç´¢æ™‚ã§ã¯ãªãドã‚ュメントã®è¿½åŠ 時ã«ã¤ã„ã¦ã®ãƒãƒ¥ãƒ¼ãƒ‹ãƒ³ã‚°ã«ã¤ã„ã¦è¨˜ã—ã¦ã‚る。 更新自体ã¯å‚ç…§ã«æ¯”ã¹ã¦é »åº¦ãŒå°‘ãªã„ãŒã€å‚ç…§ã¯ãƒ¬ãƒ—リケーションã—ã¦è² è·åˆ†æ•£ã—ã‚„ã™ã„。 æ›´æ–°ã¯æ•´åˆæ€§ã‚’ä¿ã¤ãŸã‚ã«ä¸€å°ã®ãƒžã‚¹ã‚¿ãƒ¼ãƒŽãƒ¼ãƒ‰ã«å¯¾ã—ã¦è¡Œã‚れるã®ã§æ›´æ–°ã¯ãƒœãƒˆãƒ«ãƒãƒƒã‚¯ã«ãªã‚Šã‚„ã™ã„ã®ã 。 定期的㫠IO è² è·ãŒé«˜ããªã‚‹ Solr を使ã£ã¦ã„ã‚‹ã¨ã€ä¸€æ™‚çš„ã«çŒ›çƒˆã« IO è² è·ãŒé«˜ã¾ã‚‹æ™‚ãŒã‚る。fsync ã«ãªã‚“ã¨1分以上ã‹ã‹ã‚‹ã‚ˆã†ãªã€çŒ›çƒˆãªè² è·ã 。 ã“ã‚Œã¯ã‚¤ãƒ³ãƒ‡ã‚¯ã‚¹ã®ãƒžãƒ¼ã‚¸æ™‚ã«èµ·ãã‚‹ IO è² è·ã§ã€å·¨å¤§ãªã‚¤ãƒ³ãƒ‡ã‚¯ã‚¹åŒå£«ã®ãƒžãƒ¼ã‚¸ã ã¨ãã®åˆè¨ˆã‚µã‚¤ã‚ºåˆ†ã® IO ãŒç™ºç”Ÿã™ã‚‹ã“ã¨ã§ IO 処ç†ãŒå°‚有ã•ã‚ŒãŸã¾ã¾ã«ãªã£ã¦ã„ãŸã€‚ インデクス
Javaè£½å½¢æ…‹ç´ è§£æžãƒ©ã‚¤ãƒ–ラリ「lucene-gosenã€ã‚’試ã—ã¦ã¿ã‚‹
æ¦‚è¦ Javaã®æœ‰åãªå½¢æ…‹ç´ 解æžå™¨ã§ã‚ã‚ŠãªãŒã‚‰ã€é•·ã‚‰ã「公å¼ã‚µã‚¤ãƒˆã©ã“？ã€ãªçŠ¶æ³ã ã£ãŸSenã¨GoSenã§ã™ãŒã€æœ€è¿‘ã¯lucene-gosenãªã‚‹GoSenベースã®ãƒ©ã‚¤ãƒ–ラリãŒã¡ã‚ƒã‚“ã¨ç®¡ç†ã•ã‚ŒãŸçŠ¶æ…‹ã§å…¬é–‹ã•ã‚Œã¦ã‚‹ã¨ã‹ã€‚ lucene-gosen http://code.google.com/p/lucene-gosen/ ã—ã‹ã‚‚ã“ã®åã¯è¾žæ›¸å†…包ãªã®ã§jarã‚’è½ã¨ã™ã ã‘ã§ä½¿ãˆã¦ã€Lucene用Analyzerã‚„Solr用Toknizerも付ã„ã¦ã„ã¦ã€æ—¥æœ¬èªžã®æ¤œç´¢ç”¨ã‚¤ãƒ³ãƒ‡ãƒƒã‚¯ã‚¹ã‚’貼る時ã«ä¾¿åˆ©ãªå„種フィルタも用æ„ã•ã‚Œã¦ã„ã‚‹ã¨ã„ã†ã€è‡³ã‚Œã‚Šå°½ãã›ã‚Šãªæ§‹æˆã«ãªã£ã¦ã„ã‚‹ã¨ã‹ã€‚ ã“ã‚Œã¯è§¦ã£ã¦ã¿ãã°ã¨ã„ã†ã“ã¨ã§ã€ã¨ã‚Šã‚ãˆãšç°¡å˜ãªå½¢æ…‹ç´ 解æžã€è¾žæ›¸ã®è¿½åŠ ã€Luceneã§ã®åˆ©ç”¨ã€Solrã§ã®åˆ©ç”¨ã‚’試ã—ã¦ã¿ã¾ã—ãŸã€‚ ã¡ãªã¿ã«ä¸Šã®URLã§Commiterã®ã¨ã“ã‚ã«åå‰ãŒå‡ºã¦ã„ã‚‹Koji Sekiguchiã•ã‚“ã¯Sol
ランã‚ング
ランã‚ング
メンテナンス
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
http://blog.yoslab.com/entry/2016/12/13/192702
http://blog.yoslab.com/entry/2016/05/18/232719
Solr edismax - exact match versus fuzzy
Lucene 5.0 ã«å¯¾å¿œã—㟠Apache Solr 5.0 ãŒãƒªãƒªãƒ¼ã‚¹ã•ã‚Œã¦ãŸ - Qiita
http://blog.yoslab.com/entry/2015/02/25/031002
http://blog.yoslab.com/entry/2014/09/30/072411
Solr in Drupal
{{#tags}}- {{label}}
{{/tags}}