勉強会発表「プãƒã‚°ãƒ©ãƒžã®ãŸã‚ã®Hadoop入門〠- 科å¦ã¨éžç§‘å¦ã®è¿·å®®id:kaigai ã®ä¸»å‚¬ã™ã‚‹å‹‰å¼·ä¼šã§ç™ºè¡¨ã—ã¦ãã¾ã—ãŸã€‚ Hadoop for programmerView more presentations from shiumachi. ç”ãˆã‚‰ã‚Œãªã‹ã£ãŸè³ªå• Shuffleフェーズã£ã¦ã€ã‚½ãƒ¼ãƒˆã‚’ã©ã†ã„ã†ä»•çµ„ã¿ã§ã‚„ã£ã¦ã‚‹ã®ï¼Ÿã€€ãƒ‡ãƒ¼ã‚¿å…¨éƒ¨ã‚’ãªã‚ã¦ã‚‹ã®ï¼Ÿ Partitionerã¨ã„ã†ã‚¯ãƒ©ã‚¹ã§ãƒ‡ãƒ¼ã‚¿ã‚’振り分ã‘ã¦ã‚‹ã€‚タスクã”ã¨ã¯ç‹¬ç«‹ã—ã¦ã‚‹ã®ã§ãƒ‡ãƒ¼ã‚¿ã‚’ã¾ãŸãŒã£ã¦ã‚¢ã‚¯ã‚»ã‚¹ã™ã‚‹ã“ã¨ã¯ãªã„ã¨æ€ã†ã€‚ã§ã‚‚ç´°ã‹ã„ã“ã¨ã¯ã¡ã‚‡ã£ã¨ã‚ã‹ã‚‰ãªã„。 Mapä¸ã«ãƒ‡ãƒ¼ã‚¿è¿½åŠ ã—ãŸã‚‰ã©ã†ãªã‚‹ã®ã‹ï¼Ÿ ã•ã™ãŒã«æ‰±ã†ãƒ‡ãƒ¼ã‚¿ã¯æœ€åˆã«æ±ºã‚ã¦ã„ã‚‹ã¨æ€ã†ãŒã€ã‚„ã£ãŸã“ã¨ãªã„ã®ã§ã‚ã‹ã‚‰ãªã„。 Streamingã£ã¦å…·ä½“çš„ã«ã©ã‚“ãªå‡¦ç†ã—ã¦ã‚‹ã®ï¼Ÿ jarファイルã¯æŠ•ã’ã¦ã‚‹ã‘ã©ã€å®Ÿè¡Œæ™‚ã«ä½¿ã†ã‚¹ã‚¯ãƒªãƒ—トã¯ã©ã†ã‚„ã£ã¦æŠ•ã’ã¦ã‚‹ã®ã‹ã‚ã‹ã‚‰ãªã„。 ã‚ã¨ã§èª¿ã¹ã¨ãã¾ã™ã€‚ 今ã®ä¸–ã®ä¸ã«å‡ºã¦ã‚‹Hadoop本ã£ã¦æ§‹ç¯‰ã¨ã‹é‹ç”¨ã®è©±
{{#tags}}- {{label}}
{{/tags}}