回帰モデルã«ãŠã‘ã‚‹L1æ£å‰‡åŒ–ã¨L2æ£å‰‡åŒ–ã®åŠ¹æžœ - old school magicæ¦‚è¦ å›žå¸°ãƒ¢ãƒ‡ãƒ«ã¨ã¯ã€ä¸Žãˆã‚‰ã‚ŒãŸå…¥åŠ›ã‚’用ã„ã¦ç›®æ¨™å¤‰æ•°ã‚’予測ã™ã‚‹ãƒ¢ãƒ‡ãƒ«ã§ã™ã€‚ 回帰モデルã§ã¯éŽå¦ç¿’を防ããŸã‚ã€èª¤å·®é–¢æ•°(二乗誤差関数ãªã©)ã«æ¬¡ã®å¼ã§è¡¨ã•ã‚Œã‚‹æ£å‰‡åŒ–é …ã‚’åŠ ãˆã¦æœ€å°åŒ–ã—ã¾ã™ã€‚ ã“ã®å½¢ã®æ£å‰‡åŒ–é …ã‚’ç”¨ã„る回帰をブリッジ回帰ã¨å‘¼ã³ã¾ã™ã€‚ 特ã«ã®æ™‚ã‚’Lasso回帰ã€ã®æ™‚ã‚’Ridge回帰ã¨å‘¼ã³ã¾ã™ã€‚ã¾ãŸã€ãã‚Œãžã‚Œã«ç”¨ã„られã¦ã„ã‚‹æ£å‰‡åŠ é …ã‚’L1ノルムã€L2ノルムã¨å‘¼ã³ã¾ã™ã€‚ L1ノルムã¨L2ノルムã®ç‰¹å¾´ã‚’ç°¡å˜ã«ã¾ã¨ã‚ã‚‹ã¨æ¬¡ã®ã‚ˆã†ã«ãªã‚Šã¾ã™ã€‚ L1ノルムã¯ãƒã‚šãƒ©ãƒ¡ãƒ¼ã‚¿ã®ä¸€éƒ¨ã‚’完全ã«0ã«ã™ã‚‹ãŸã‚ã€ãƒ¢ãƒ†ã‚™ãƒ«ã®æŽ¨å®šã¨å¤‰æ•°é¸æŠžã‚’åŒæ™‚ã«è¡Œã†ã“ã¨ã‹ã‚™ã¦ã‚™ãã‚‹ 特ã«æ¬¡å…ƒæ•°>>データ数ã®çŠ¶æ³ã¦ã‚™å¼·åŠ› L2ノルムã¯å¾®åˆ†å¯èƒ½ã¦ã‚™ã‚り解æžçš„ã«è§£ã‘ã‚‹ã‹ã‚™ã€L1ノルム㯠解æžçš„ã«è¨ˆç®—出æ¥ãªã„ L1ノルムã«ã¯æ§˜ã€…ãªæŽ¨å®šã‚¢ãƒ«ã‚³ã‚™ãƒªã‚¹ã‚™ãƒ ã‹ã‚™æ案ã•ã‚Œã¦ã„ã‚‹ ã¾ãŸã€L1ノルムã«ã¯ 次元ã‹ã‚™æ¨™æœ¬æ•°ã‚ˆã‚Šå¤§ãã„時ã€é«˜ã€…個ã®å¤‰æ•°ã¾ã¦
{{#tags}}- {{label}}
{{/tags}}