トピックモデルを用ã„ãŸä½µå£²ã®åˆ†æž - gensim ã® LdaModel 使用 - ãªã‚“ã¨ãªã㪠Developer ã®ãƒ¡ãƒ¢ãƒˆãƒ”ックモデルã¯æ½œåœ¨çš„ãªãƒˆãƒ”ックã‹ã‚‰æ–‡æ›¸ä¸ã®å˜èªžãŒç”Ÿæˆã•ã‚Œã‚‹ã¨ä»®å®šã™ã‚‹ãƒ¢ãƒ‡ãƒ«ã®ã‚ˆã†ã§ã™ã€‚ ã§ã‚ã‚Œã°ã€ã“れを「Python ã§ã‚¢ã‚½ã‚·ã‚¨ãƒ¼ã‚·ãƒ§ãƒ³åˆ†æžã€ã§è¡Œã£ãŸã‚ˆã†ãªä½µå£²ã®åˆ†æžã«é©ç”¨ã™ã‚‹ã¨ã©ã†ãªã‚‹ã®ã‹æ°—ã«ãªã£ãŸã®ã§ã€gensim ã® LdaModel を使ã£ã¦åŒæ§˜ã®ãƒ‡ãƒ¼ã‚¿ã‚»ãƒƒãƒˆã‚’ LDA（潜在的ディリクレé…分法）ã§å‡¦ç†ã—ã¦ã¿ã¾ã—ãŸã€‚ ソース㯠http://github.com/fits/try_samples/tree/master/blog/20180313/ 1. ã¯ã˜ã‚㫠データセット gensim 㧠LDA を処ç†ã™ã‚‹å ´åˆã€é€šå¸¸ã¯ä»¥ä¸‹ã®ã‚ˆã†ãª lowcorpus フォーマットを使ã£ãŸæ–¹ãŒç°¡å˜ãªã‚ˆã†ã§ã™ã€‚（LowCorpus ã§å‡¦ç†ã§ãã‚‹ã®ã§ï¼‰ <文書数> <文書1ã®å˜èªž1> <文書1ã®å˜èªž2> ・・・ <文書2ã®å˜èªž1> <文書2ã®å˜èªž2> ・・・ ・・・ ãŸã ã€1行目ãŒå†—é•·ãªã‚ˆã†ã«
è’™å¤ã‚¿ãƒ³ãƒ¡ãƒ³ä¸æœ¬ã‚³ãƒ¼ãƒ‘スã«å¯¾ã—ã¦ã®LDAã®é©ç”¨ã¨ãƒˆãƒ”ック数ã®æŽ¢ç´¢ – ã‹ã‚‚ã®ã¯ã—ã®åˆ†æžãƒ–ãƒã‚°
トピックモデルã®è©•ä¾¡æŒ‡æ¨™ Perplexity ã¨ã¯ä½•ãªã®ã‹ï¼Ÿ
{{#tags}}- {{label}}
{{/tags}}