Hadoop MapReduceプãƒã‚°ãƒ©ãƒ を解剖ã™ã‚‹ã‚ªãƒ¼ãƒ—ンソース・ソフトウェア「Hadoopã€ã®MapReduceジョブã¯ã€æ¨™æº–ã§ã¯Javaã§è¨˜è¿°ã—ã¾ã™ï¼ˆãã®ä»–ã«ã¯ã€Pigã€Hiveã€JAQLã¨ã„ã£ãŸã‚‚ã®ãŒã‚ã‚Šã¾ã™ï¼‰ã€‚ã—ã‹ã—ã€æ„外ã¨åˆå¿ƒè€…ã«ã¯åˆ†ã‹ã‚Šã«ãã„ã¨ç†è€…ã¯æ„Ÿã˜ã¾ã™ã€‚本記事ã§ã¯ã€MapReduceジョブã®ã‚µãƒ³ãƒ—ルコードを使ã£ã¦ã€ã§ãã‚‹é™ã‚Šæ£ã—ãコードã®æ„味をç†è§£ã—ã€MapReduceã¸ã®å…¥ã‚Šå£ã‚’示ã—ãŸã„ã¨æ€ã„ã¾ã™ã€‚ Hadoopã§MapReduceを記述ã™ã‚‹ã¨ãã«ä½¿ã†APIãŒã€0.19ã‹ã‚‰0.20ã«å¤‰ã‚ã‚‹ã¨ã“ã‚ã§æ–°ã—ããªã£ã¦ã„ã¾ã™ã€‚実ã¯ã€ç¾æ™‚点ã§Hadoopプãƒã‚¸ã‚§ã‚¯ãƒˆæœ¬ä½“ã‹ã‚‰ã§ã•ãˆã‚‚ã€æ–°APIを使ã£ãŸã‚µãƒ³ãƒ—ルãŒæ示ã•ã‚Œã¦ã„ã¾ã›ã‚“。本記事ã§ã¯ã€æ–°ã—ã„APIã§ç†è€…ãŒæ›¸ãç›´ã—ãŸã‚µãƒ³ãƒ—ルを使ã£ã¦è§£èª¬ã—ã¾ã™ã®ã§ã€ã“ã®ã‚µãƒ³ãƒ—ルã¯0.19以å‰ã®Hadoopã§ã¯å‹•ã‹ãªã„ã“ã¨ã«æ³¨æ„ã—ã¦ãã ã•ã„。ã“ã®è¨˜äº‹ã¯ã€0.20.2を使ã£ã¦æ¤œè¨¼ã—ã€è§£èª¬ã—ã¦ã„ã¾ã™ã€‚
グーグルã€åˆ†æ•£å‡¦ç†ã®ãŸã‚ã«ãƒ‡ã‚¶ã‚¤ãƒ³ã•ã‚ŒãŸè¨€èªžã€ŒSawzallã€ã‚’オープンソースã§å…¬é–‹
yebo blog: Googleã¯æ—¢ã«MapReduceを使ã£ã¦ã„ãªã„
グーグルãŒæ§‹ç¯‰ã—ãŸå¤§è¦æ¨¡ã‚·ã‚¹ãƒ†ãƒ ã®ç¾å®Ÿã€ãã—ã¦ãƒ‡ã‚¶ã‚¤ãƒ³ãƒ‘ターン（1）～MapReduceç·¨
{{#tags}}- {{label}}
{{/tags}}