This domain may be for sale!
OBB vs AABB - Radium Software Development
This domain may be for sale!
Hadoopã€hBaseã§æ§‹ç¯‰ã™ã‚‹å¤§è¦æ¨¡åˆ†æ•£ãƒ‡ãƒ¼ã‚¿å‡¦ç†ã‚·ã‚¹ãƒ†ãƒ
CodeZine編集部ã§ã¯ã€ç¾å ´ã§æ´»èºã™ã‚‹ãƒ‡ãƒ™ãƒãƒƒãƒ‘ーをスターã«ã™ã‚‹ãŸã‚ã®ã‚«ãƒ³ãƒ•ã‚¡ãƒ¬ãƒ³ã‚¹ã€ŒDevelopers Summitã€ã‚„ã€ã‚¨ãƒ³ã‚¸ãƒ‹ã‚¢ã®ç”Ÿãã–ã¾ã‚’ブーストã™ã‚‹ãŸã‚ã®ã‚¤ãƒ™ãƒ³ãƒˆã€ŒDevelopers Boostã€ãªã©ã€ã•ã¾ã–ã¾ãªã‚«ãƒ³ãƒ•ã‚¡ãƒ¬ãƒ³ã‚¹ã‚’ä¼ç”»ãƒ»é‹å–¶ã—ã¦ã„ã¾ã™ã€‚
Welcome to Apacheâ„¢ Hadoopâ„¢!
Apache Hadoop The Apache® Hadoop® project develops open-source software for reliable, scalable, distributed computing. The Apache Hadoop software library is a framework that allows for the distributed processing of large data sets across clusters of computers using simple programming models. It is designed to scale up from single servers to thousands of machines, each offering local computation an
ã€IT用語】MapReduceã¨Hadoop
ã€IT用語】MapReduceã¨Hadoop 金 裕å¯é‡Œ, 木田 直人, 三木光範, 廣安知之 ISDL Report　 No. 20091306001 2009å¹´ 7月 2æ—¥ 1  ã¯ã˜ã‚ã« è¿‘å¹´, Webページã®æ¤œç´¢ã‚„, 地図ã®æ¤œç´¢ã‚’è¡Œã†ãŸã‚ã«Googleã®ã‚µãƒ¼ãƒ“スãŒé »ç¹ã«åˆ©ç”¨ã•ã‚Œã¦ãŠã‚Š, å¿…è¦ä¸å¯æ¬ ãªã‚‚ã®ã¨ãªã£ã¦ã„ã‚‹.Web検索ã¯, 莫大ãªãƒ‡ãƒ¼ã‚¿ã‚’扱ã†ã®ã«ã‚‚é–¢ã‚らãš, 瞬時ã«æ¤œç´¢çµæžœã‚’表示ã•ã›ã‚‹ã“ã¨ã‚’実ç¾ã—ã¦ã„ã‚‹. ã“ã®äº‹å®Ÿã®è£å´ã§ã¯, 想åƒä»¥ä¸Šã«è†¨å¤§ãªè¨ˆç®—や多数ã®ã‚³ãƒ³ãƒ”ュータã®åƒããŒã‚ã‚‹. Googleã¯ãã®è¶…巨大ãªã‚³ãƒ³ãƒ”ュータãƒãƒƒãƒˆãƒ¯ãƒ¼ã‚¯ã‚’用ã„ã¦, 膨大ãªãƒ‡ãƒ¼ã‚¿å‡¦ç†ã‚’分散化ã—ã¦ã„ã‚‹. ãã®ãŸã‚, 大é‡ã®ãƒ‡ãƒ¼ã‚¿ã‚’瞬時ã«å‡¦ç†ã™ã‚‹ã“ã¨ãŒå¯èƒ½ã«ãªã£ã¦ã„ã‚‹. ãã®Googleã®åˆ†æ•£å‡¦ç†ã‚·ã‚¹ãƒ†ãƒ ã¯MapReduce[1]ã¨å‘¼ã°ã‚Œã¦ãŠã‚Š, Googleã®æ¤œç´¢æŠ€è¡“を支ãˆã‚‹ã‚³ã‚¢æŠ€è¡“ã§ã‚ã‚‹.
blog.katsuma.tv
å‰å›žã€JavaScriptã§Map Reduceã®ã‚³ãƒ¼ãƒ‰ãŒæ›¸ã‘ã‚‹Hadoop Streamingã«ã¤ã„ã¦ç´¹ä»‹ã—ã¾ã—ãŸã€‚ 標準入出力ã•ãˆã‚µãƒãƒ¼ãƒˆã•ã‚Œã¦ã‚ã‚Œã°ã€ä»»æ„ã®ã‚³ãƒ¼ãƒ‰ã§Map Reduuceã®å‡¦ç†ãŒæ›¸ã‘ã‚‹ã€ã¨ã„ã†ã‚‚ã®ã§ã—ãŸãŒã€ã‚¨ãƒ³ã‚¸ãƒ‹ã‚¢ã¯ãã‚‚ãã‚‚é¢å€’ãã•ãŒã‚Šã€‚コードも書ãã®ã‚‚é¢å€’ã§ã™ã€‚ ã¨ã€ã„ã†ã‚ã‘ã§ã€ä»Šå›žã¯ã‚‚ã†ã‚³ãƒ¼ãƒ‰ã™ã‚‰æ›¸ã‹ãšã«SQLライクã§Map Reduceã§ãã‚‹Hiveã¨ã„ã†ãƒ—ãƒãƒ€ã‚¯ãƒˆã«ã¤ã„ã¦ã€ã¾ã¨ã‚ãŸã„ã¨æ€ã„ã¾ã™ã€‚ Hive Hiveã¨ã¯ã€ç°¡å˜ã«è¨€ã†ã¨Hadoop上ã§å‹•ä½œã™ã‚‹RDBã®ã‚ˆã†ãªã‚‚ã®ã§ã™ã€‚ HDFSãªã©ã®åˆ†æ•£ãƒ•ã‚¡ã‚¤ãƒ«ã‚·ã‚¹ãƒ†ãƒ 上ã«å˜åœ¨ã™ã‚‹ãƒ‡ãƒ¼ã‚¿ã«å¯¾ã—ã¦ã€HiveQLã¨ã„ã†SQLライクãªè¨€èªžã§æ“作ã§ãã¾ã™ã€‚ ã§ã€é¢ç™½ã„ã®ãŒHiveQLã®æ“作ã¯åŸºæœ¬çš„ã«Map Reduceã®ãƒ©ãƒƒãƒ‘ーã«ãªã£ã¦ã„ã‚‹ã“ã¨ã€‚ è¦ã™ã‚‹ã«ã€SELECT文実行ã™ã‚‹ã¨è£ã§Map&Reduceã®ã‚¿ã‚¹ã‚¯ãŒèµ°ã‚Šå‡º
è€äººã¨MapReduce - ã¨ã—ã®ä»Šæ—¥ã§ã
若人: 我々ã¯ã€è¶…並列計算ã®ãƒ•ãƒ¬ãƒ¼ãƒ ワークã¨ã—ã¦MapReduceを実装ã—é‹ç”¨ã«æˆåŠŸã—ãŸã€‚ 1000å°ã®ã‚³ãƒ³ãƒ”ュータã§ã€1TBã®ãƒ‡ãƒ¼ã‚¿å‡¦ç†ãŒ68秒ã§ã§ãã‚‹ã‚“ã ! ã“ã‚Œã¯ã€æœ‰å²ä»¥æ¥ã®å¿«æŒ™ã ã€ã©ã‚“ãªã‚‚ã‚“ã ã„![6] ç¿: ã‚～ã€æ°´ã‚’å·®ã—ã¦æ‚ªã„ã‚“ã ã‘ã©ããˆã€MapReduceãªã‚“ã¦æŠ€è¡“ã¯ããˆã€æˆ‘々データベースã®å°‚門家ãŒ40å¹´ã‚‚å‰ã‹ã‚‰ç ”究ã—ã¦ãŠã‚‹ã‚“よ。 ãã‚Œã«ã€MapReduceã¨åŒç‰ã®åˆ†æ•£ãƒ‡ãƒ¼ã‚¿ãƒ™ãƒ¼ã‚¹ã®SQLエンジンも商用化ã•ã‚Œã¦ã„ã‚‹ã—。 ã“ã‚“ãªäº‹ã¯ã€ãƒ‡ãƒ¼ã‚¿ãƒ™ãƒ¼ã‚¹ç ”究分野ã®è«–æ–‡ã«å…¨éƒ¨ç™ºè¡¨ã•ã‚Œã¦ã„るよ。 å›ãŸã¡ã‚³ãƒ³ãƒ”ュータサイエンティストã¯ã€äººã®è«–文をèªã¾ã‚“ã‹ã‚‰ãªã€å›°ã£ãŸã‚‚ã‚“ã 。 ãã‚Œã«MapReduceã¯ã€æˆ‘々先é”ã®çŸ¥æµã‚’æ´»ã‹ã—ã¨ã‚‰ã‚“! 若人: MapReduceã«ä½•ã‹å•é¡ŒãŒã‚ã‚Šã¾ã™ã‹? 超簡å˜ã«ä¸¦åˆ—アプリãŒé–‹ç™ºã§ãã€è‡ªå‹•å®Ÿè¡Œã§ãã‚‹ã‚“ã§ã™ã‚ˆã€ã“ã‚“ãªã‚“システム今ã¾ã§ã«ç„¡ã„ã—ã€å¿«æŒ™ã§ã—ょ! ç¿: ã
MapReduce - naoyaã®ã¯ã¦ãªãƒ€ã‚¤ã‚¢ãƒªãƒ¼
"MapReduce" 㯠Google ã®ãƒãƒƒã‚¯ã‚¨ãƒ³ãƒ‰ã§åˆ©ç”¨ã•ã‚Œã¦ã„る並列計算システムã§ã™ã€‚検索エンジンã®ã‚¤ãƒ³ãƒ‡ãƒƒã‚¯ã‚¹ä½œæˆã‚’ã¯ã˜ã‚ã¨ã™ã‚‹ã€å¤§è¦æ¨¡ãªå…¥åŠ›ãƒ‡ãƒ¼ã‚¿ã«å¯¾ã™ã‚‹ãƒãƒƒãƒå‡¦ç†ã‚’想定ã—ã¦ä½œã‚‰ã‚ŒãŸã‚·ã‚¹ãƒ†ãƒ ã§ã™ã€‚ MapReduce ã®é¢ç™½ã„ã¨ã“ã‚ã¯ã€map() 㨠reduce() ã¨ã„ã†äºŒã¤ã®é–¢æ•°ã®çµ„ã¿åˆã‚ã›ã‚’定義ã™ã‚‹ã ã‘ã§ã€å¤§è¦æ¨¡ãƒ‡ãƒ¼ã‚¿ã«å¯¾ã™ã‚‹æ§˜ã€…ãªè¨ˆç®—å•é¡Œã‚’解決ã™ã‚‹ã“ã¨ãŒã§ãる点ã§ã™ã€‚ MapReduce ã®è¨ˆç®—モデル map() ã«ã¯ãã®è¨ˆç®—å•é¡Œã®ãƒ‡ãƒ¼ã‚¿ã¨ã—ã¦ã® key-value ペアãŒæ¬¡ã€…ã«æ¸¡ã£ã¦ãã¾ã™ã€‚map() ã§ã¯ key-value 値ã®ãƒšã‚¢ã‚’ç•°ãªã‚‹è¤‡æ•°ã® key-value ペアã«å¤‰æ›ã—ã¾ã™ã€‚reduce() ã«ã¯ã€map() ã§ä½œã£ãŸ key-value ペアをåŒä¸€ã® key ã§æŸããŸã‚‚ã®ãŒé †ç•ªã«æ¸¡ã£ã¦ãã¾ã™ã€‚ãã® key-values ペアを任æ„ã®å½¢å¼ã«å¤‰æ›ã™ã‚‹ã“ã¨
1
ランã‚ング
ランã‚ング
ランã‚ング
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
日本Javaユーザーグループ
日本Javaユーザーグループ
{{#tags}}- {{label}}
{{/tags}}