SLOBSERVER - L'actualité de Second LifeNot sure where to start? Get going with our crush course for beginners and create your first project.
Google App Engineを使ã£ãŸMapReduce·Appengine Mapreduce MOONGIFT
Appengine Mapreduceã¯Google App Engine用Python製ã®ã‚ªãƒ¼ãƒ—ンソース・ソフトウェア。Googleã®åŸºç¤ŽæŠ€è¡“ã®ä¸€ã¤ã§ã‚ã‚‹MapReduce。膨大ãªæ–‡å—列やデータを細ã‹ã細分化ã—ã€ç„¡æ•°ã®ã‚³ãƒ³ãƒ”ュータ上ã§ä¸¦åˆ—処ç†ã•ã›ã‚‹ã“ã¨ã§é«˜é€Ÿãªã‚·ã‚¹ãƒ†ãƒ を実ç¾ã™ã‚‹ä»•çµ„ã¿ã 。 å®Ÿè¡Œç”»é¢ MapReduceã¯Amazon Webサービスã«ã‚‚真似ã•ã‚Œã¦ãŠã‚Šï¼ˆAmazon Elastic MapReduce）ã€æœ‰ç›Šã•ãŒåˆ†ã‹ã£ã¦ã„る。ã ãŒã€ã©ã†ä½¿ãˆã°è‰¯ã„ã‹ãŒä»Šã²ã¨ã¤å®Ÿæ„Ÿã§ããªã„ã‹ã‚‚知れãªã„。ãã“ã§MapReduceを手軽ã«è©¦ã›ã‚‹ã‚·ã‚¹ãƒ†ãƒ ã¨ã—ã¦é–‹ç™ºã•ã‚ŒãŸã®ãŒAppengine Mapreduceã 。 Appengine Mapreduceã¯GooglerãŒé–‹ç™ºã—ãŸã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ã§ã€Google App Engine上ã§å‹•ä½œã™ã‚‹ã€‚テã‚ストãªã©ã‚’分散化処ç†ã™ã‚‹ã“ã¨ãŒã§ãる。管ç†ç”»é¢ã‹ã‚‰å‡¦ç†ã‚’
グーグルã«ã‚ˆã‚‹MapReduceサービス「BigQueryã€ãŒç™»å ´ã€‚SQLライクãªå‘½ä»¤ã§å¤§è¦æ¨¡ãƒ‡ãƒ¼ã‚¿æ“作
「数兆件ã®ãƒ‡ãƒ¼ã‚¿ã‚‚対話的ã«ã€é«˜é€Ÿã«åˆ†æžã§ãã‚‹ã€ã€‚グーグルã¯5月19æ—¥ã«ã“ã®ã‚ˆã†ãªè¡¨ç¾ã§æ–°ã—ã„サービス「BigQueryã€ã®ç™»å ´ã‚’紹介ã™ã‚‹ã‚¨ãƒ³ãƒˆãƒªã‚’ã€ãƒ–ãƒã‚°ã«ãƒã‚¹ãƒˆã—ã¦ã„ã¾ã™ã€‚ グーグルãŒå…¬é–‹ã—ãŸBigQueryã¯ã€Hadoopやデータウェアãƒã‚¦ã‚¹ãªã©ã‚’用ã„ã¦å¤šãã®ä¼æ¥ãŒè¡ŒãŠã†ã¨ã—ã¦ã„る大è¦æ¨¡ãƒ‡ãƒ¼ã‚¿ï¼ˆã„ã‚ゆる「Big Dataã€ï¼‰ã®åˆ†æžã‚’ã€ã‚°ãƒ¼ã‚°ãƒ«ã®ã‚¯ãƒ©ã‚¦ãƒ‰ã§å¯èƒ½ã«ã—ã¾ã™ã€‚利用者ã¯Google Storage経由ã§å¤§è¦æ¨¡ãƒ‡ãƒ¼ã‚¿ã‚’転é€ã—ã€SQLライクãªå‘½ä»¤ã«ã‚ˆã£ã¦æŠ½å‡ºã‚„分æžã‚’è¡Œã„ã¾ã™ã€‚ ã¾ã‚‹ã§ã‚°ãƒ¼ã‚°ãƒ«ãŒå¤§è¦æ¨¡ãƒ‡ãƒ¼ã‚¿å‡¦ç†ã®MapReduceをホスティングã—ã€ãã®æ©Ÿèƒ½ã‚’サービスã¨ã—ã¦æä¾›ã™ã‚‹ã‚ˆã†ãªã‚‚ã®ãŒBigQueryã¨ã„ãˆã¾ã™ï¼ˆãŸã ã—公開ã•ã‚ŒãŸã€ŒBigQueryã€ã®èª¬æ˜Žã«ã¯ã€å†…部ã§MapReduceを利用ã—ã¦ã„ã‚‹ã®ã‹ã©ã†ã‹ã®è¨˜è¿°ã¯ãªã„ã®ãŸã‚ã€MapReduce「的ã€ãªã‚µãƒ¼ãƒ“スã¨è¡¨ç¾ã™ã¹ãã‹ã‚‚ã—ã‚Œ
Hadoopã§ã€ã‹ã‚“ãŸã‚“åˆ†æ•£å‡¦ç† (Yahoo! JAPAN Tech Blog)
ãƒ¤ãƒ•ãƒ¼æ ªå¼ä¼šç¤¾ã¯ã€2023å¹´10月1æ—¥ã«LINEãƒ¤ãƒ•ãƒ¼æ ªå¼ä¼šç¤¾ã«ãªã‚Šã¾ã—ãŸã€‚LINEãƒ¤ãƒ•ãƒ¼æ ªå¼ä¼šç¤¾ã®æ–°ã—ã„ブãƒã‚°ã¯ã“ã¡ã‚‰ã§ã™ã€‚LINEヤフー Tech Blog ã“ã‚“ã«ã¡ã¯ã€åœ°åŸŸã‚µãƒ¼ãƒ“ス事æ¥éƒ¨ã®å‰ç”°ä¸€æ˜Ÿã§ã™ã€‚ 今回ã¯ã€Hadoopã«ã¤ã„ã¦ã€Yahoo! JAPANã§ã®å®Ÿéš›ã®ä½¿ç”¨ä¾‹ã‚’交ãˆãªãŒã‚‰æ›¸ããŸã„ã¨æ€ã„ã¾ã™ã€‚Hadoopã¨ã¯ã€å¤§é‡ã®ãƒ‡ãƒ¼ã‚¿ã‚’手軽ã«è¤‡æ•°ã®ãƒžã‚·ãƒ³ã«åˆ†æ•£ã—ã¦å‡¦ç†ã§ãるオープンソースã®ãƒ—ラットフォームã§ã™ã€‚ 複数ã®ãƒžã‚·ãƒ³ã¸ã®åˆ†æ•£å‡¦ç†ã¯ã€ãƒ—ãƒã‚»ã‚¹é–“通信やã€éšœå®³æ™‚ã¸ã®å¯¾å¿œãªã©ã‚’考ãˆãªã‘ã‚Œã°ãªã‚‰ãšã€ãƒ—ãƒã‚°ãƒ©ãƒžã«ã¨ã£ã¦æ•·å±…ãŒé«˜ã„ã‚‚ã®ã§ã™ãŒã€ Hadoopã¯ãã†ã„ã£ãŸé¢å€’ãã•ã„分散処ç†ã‚’一手ã«å¼•ãå—ã‘ã¦ãã‚Œã¾ã™ã€‚ 1å°ã§ã¯å‡¦ç†ã«ã‹ãªã‚Šæ™‚é–“ãŒã‹ã‹ã‚‹ã‚ˆã†ãªå¤§é‡ã®ãƒ‡ãƒ¼ã‚¿ã‚‚ã€è¤‡æ•°ãƒžã‚·ãƒ³ã«åˆ†æ•£ã•ã›ã‚‹ã“ã¨ã§ã€é©šãã¹ãスピードã§å‡¦ç†ã‚’è¡Œã†ã“ã¨ãŒã§ãã¾ã™ã€‚ 例ãˆã°ã€ä»Šã¾ã§1å°ã§ã‚„ã£ã¦ã„ãŸã€ã‚ã‚‹ãƒã‚°é›†è¨ˆå‡¦ç†
Googleã®MapReduceアルゴリズムをJavaã§ç†è§£ã™ã‚‹
Googleã®MapReduceアルゴリズムをJavaã§ç†è§£ã™ã‚‹ï¼šã„ã¾å†æ³¨ç›®ã®åˆ†æ•£å‡¦ç†æŠ€è¡“（å‰ç·¨ï¼‰ï¼ˆ1/2 ページ） 最近注目を浴ã³ã¦ã„る分散処ç†æŠ€è¡“「MapReduceã€ã®åˆ©ç‚¹ã‚’サンプルã‹ã‚‰ã‚¢ãƒ«ã‚´ãƒªã‚ºãƒ レベルã§ç†è§£ã—ã€æ˜”ã‹ã‚‰ã‚ã‚‹Java関連ã®åˆ†æ•£å‡¦ç†æŠ€è¡“を見直ã™ç‰¹é›†ä¼ç”»ï¼ˆç·¨é›†éƒ¨ï¼‰ ã„ã¾æ³¨ç›®ã®å¤§è¦æ¨¡åˆ†æ•£å‡¦ç†ã‚¢ãƒ«ã‚´ãƒªã‚ºãƒ 最近ã€å¤§è¦æ¨¡åˆ†æ•£å‡¦ç†ãŒæ³¨ç›®ã‚’æµ´ã³ã¦ã„ã¾ã™ã€‚特ã«ã€ã€ŒMapReduceã€ã¨ã„ã†ã‚¢ãƒ«ã‚´ãƒªã‚ºãƒ ã«ã¤ã„ã¦ç›®ã«ã™ã‚‹ã“ã¨ãŒå¤šããªã‚Šã¾ã—ãŸã€‚Googleã®è†¨å¤§ãªã‚µãƒ¼ãƒå‡¦ç†ã§ä½¿ã‚ã‚Œã¦ã„ã‚‹ã¨ã„ã†ã“ã¨ã§ã€ã“ã“æ•°å¹´ã®åˆ†æ•£å‡¦ç†æŠ€è¡“ã®ä¸ã§ã¯ç‰¹ã«æ³¨ç›®ã‚’æµ´ã³ã¦ã„るよã†ã§ã™ï¼ˆå‚考「見ãˆã‚‹ã‚°ãƒ¼ã‚°ãƒ«ã€è¦‹ãˆãªã„グーグルã€ï¼‰ã€‚MapReduceアルゴリズムを使ã†åˆ©ç‚¹ã¨ã¯ã€ã„ã£ãŸã„何ãªã®ã§ã—ょã†ã‹ã€‚ãªãœã€ã„ã¾æ³¨ç›®ã‚’æµ´ã³ã¦ã„ã‚‹ã®ã§ã—ょã†ã‹ã€‚ ãã®è©³ç´°ã¯ã€ŒMapReduce : Simplified Data Proc
1
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
ClouderaãŒHadoop用ã®æ“作ツールã€åˆç´šè€…ã«ã‚‚扱ã„ã‚„ã™ã | æƒ…å ±ãƒ»é€šä¿¡ | nikkei BPnet 〈日経BPãƒãƒƒãƒˆã€‰
{{#tags}}- {{label}}
{{/tags}}