numpyã§ã®KLダイãƒãƒ¼ã‚¸ã‚§ãƒ³ã‚¹ã¨Jensen-Shannonダイãƒãƒ¼ã‚¸ã‚§ãƒ³ã‚¹ã®å®Ÿè£… | Vingow 開発ãƒãƒ¼ãƒ ブãƒã‚°scipyã«ã¯è·é›¢ã‚’測るãŸã‚ã®æ‰‹ç¶šããŒç”¨æ„ã•ã‚Œã¦ã„ã¾ã™(scipy.spatial.distance)。ユークリッドè·é›¢ã‚„cosineè·é›¢(cosine類似度)ãªã©ã‚‚ã‚ã‚‹ã®ã§ã™ãŒã€ç¢ºçŽ‡åˆ†å¸ƒé–“ã®è·é›¢ã¨ã‚‚言ã†ã¹ãKLダイãƒãƒ¼ã‚¸ã‚§ãƒ³ã‚¹ã‚„Jensen-Shannonダイãƒãƒ¼ã‚¸ã‚§ãƒ³ã‚¹ãªã©ã¯å®Ÿè£…ã•ã‚Œã¦ã„ã¾ã›ã‚“。ã¨ã„ã†ã“ã¨ã§ã€å®Ÿè£…ã—ã¦ã¿ã¾ã—ãŸã€‚ 実装コードã ã‘見ãŸã„ã¨ã„ã†å ´åˆã¯ã€æœ€å¾Œã¾ã§èªã¿é£›ã°ã—ã¦ãã ã•ã„。 KLダイãƒãƒ¼ã‚¸ã‚§ãƒ³ã‚¹ã¨Jensen-Shannonダイãƒãƒ¼ã‚¸ã‚§ãƒ³ã‚¹ã«ã¤ã„㦠KLダイãƒãƒ¼ã‚¸ã‚§ãƒ³ã‚¹(カルãƒãƒƒã‚¯ãƒ»ãƒ©ã‚¤ãƒ–ãƒ©ãƒ¼æƒ…å ±é‡; Kullback–Leibler divergence; 相対エントãƒãƒ”ー)ã¨ã¯ã€åˆ†å¸ƒã¨åˆ†å¸ƒã®å·®ç•°ã®å¤§ãã•(≠è·é›¢)を測るもã®ã§ã™ã€‚分布ã¨åˆ†å¸ƒãŒã‚ã£ãŸã¨ãã€ã®ã«å¯¾ã™ã‚‹KLダイãƒãƒ¼ã‚¸ã‚§ãƒ³ã‚¹ã¯ ã§å®šç¾©ã•ã‚Œã¾ã™ã€‚ã¾ãŸã€ã‚¯ãƒã‚¹ã‚¨ãƒ³ãƒˆãƒãƒ”ーを使ã£ã¦ ã¨å®šç¾©ã™ã‚‹ã“ã¨ã‚‚ã§ãã¾ã™ã€‚クãƒ
Mallet: MAchine Learning for LanguagE Toolkit
http://www.cs.cmu.edu/~chongw/slda/
{{#tags}}- {{label}}
{{/tags}}