ãªã›ã‚™DMMã‹ã‚™web3ã«å‚å…¥ã—ãŸã®ã‹ã€‚Seamoon Protocolã‹ã‚™ç›®æŒ‡ã™æ–°ãŸãªã‚¨ãƒ³ã‚¿ãƒ¡ä½“験ã®æœªæ¥ã¨ã¯
DMM inside
ãªã›ã‚™DMMã‹ã‚™web3ã«å‚å…¥ã—ãŸã®ã‹ã€‚Seamoon Protocolã‹ã‚™ç›®æŒ‡ã™æ–°ãŸãªã‚¨ãƒ³ã‚¿ãƒ¡ä½“験ã®æœªæ¥ã¨ã¯
MongoDBãŒHadoopã¨ã®çµ±åˆå¼·åŒ–。Hiveã§MongoDBデータã¸SQLå•ã„åˆã‚ã›å¯èƒ½ã€BSONã‚’HDFS上ã«ä¿å˜ãªã©
Integration of Hadoop and MongoDB, Big Data’s Two Most Popular Technologies, Gets Significant Upgrade | 10gen, the MongoDB company MongoDB Connector for Hadoopã¯ã€Hadoopã¸ã®å…¥å‡ºåŠ›ãƒ‡ãƒ¼ã‚¿ã¨ã—ã¦MongoDBを使ãˆã‚‹ã‚ˆã†ã«ã™ã‚‹ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ã§ã€æ–°ãƒãƒ¼ã‚¸ãƒ§ãƒ³ã§ã¯ä¸»ã«ä»¥ä¸‹ã®æ©Ÿèƒ½ãŒè¿½åŠ ã•ã‚Œã¦ã„ã¾ã™ã€‚ Apache Hiveã‹ã‚‰MongoDBã®ãƒ‡ãƒ¼ã‚¿ã¸SQLライクãªå•ã„åˆã‚㛠インクリメンタルãªMapReduceジョブã®ã‚µãƒãƒ¼ãƒˆã«ã‚ˆã‚‹ã€ã‚¢ãƒ‰ãƒ›ãƒƒã‚¯ãªåˆ†æžã‚’容易ã«å®Ÿç¾ MongoDB BSONファイルをHadoop Distributed File System（HDFS）上ã«ä¿å˜ã™ã‚‹ã“ã¨ã§ã€ãƒ‡ãƒ¼ã‚¿ã®ç§»å‹•ã‚’削減 ã“ã‚Œã«ã‚ˆã‚Šä»¥ä¸‹ã®ã‚ˆã†ãªãƒ¡ãƒªãƒƒãƒˆãŒ
「Hadoop徹底入門ã€ãŒå‡ºã¾ã™ - Preferred Networks Research & Development
MacBook Air 11インãƒæ¬²ã—ã„ï¼ã€å¤ªç”°ã§ã™ã€‚ 1/27ã«ã€åŸ·ç†ã«é–¢ã‚らã›ã¦é ‚ã„ãŸã€ŒHadoop徹底入門ã€ã¨ã„ã†æœ¬ãŒã€ç¿”泳社ã•ã‚“ã‹ã‚‰å‡ºç‰ˆã•ã‚Œã¾ã™ã€‚ OSS分散フレームワーク「Hadoopã€ã®ã€æ—¥æœ¬èªžã§ã¯åˆã‚ã¦ã¨ãªã‚‹æ›¸ã下ã‚ã—本ã«ãªã‚Šã¾ã™ã€‚執ç†ã¯NTTデータã§Hadoopã®ãŠä»•äº‹ã‚’ã•ã‚Œã¦ã„ã‚‹ã€ä¸‹åž£ã•ã‚“ã€çŒ¿ç”°ã•ã‚“ã€è—¤äº•ã•ã‚“ã€æ¿±é‡Žã•ã‚“ã€ãã—ã¦ç§ã«ãªã‚Šã¾ã™ã€‚ã¾ãŸã€ç¿”泳社ã®çŸ³å·ã•ã‚“ã«ã¯éžå¸¸ã«ãŠä¸–話ã«ãªã‚Šã¾ã—ãŸã€‚ 目次ã¯ã“ã®ãƒ–ãƒã‚°ã®æœ€å¾Œã«æŽ²è¼‰ã•ã›ã¦é ‚ãã¾ã—ãŸ(詳細ã¯ã“ã¡ã‚‰)。Hadoopã¨ã¯ä½•ã‹ï¼Ÿã¨ã„ã£ãŸèª¬æ˜Žã«å§‹ã¾ã‚Šã€Hadoopã®å‘¨è¾ºãƒ—ãƒãƒ€ã‚¯ãƒˆ(Hive, Pig, HBase, Thrift)も詳ã—ãã‚«ãƒãƒ¼ã•ã‚Œã¦ã„ã¾ã™ã€‚ Hadoopã«é–¢ã—ã¦ç¾åœ¨æ—¥æœ¬èªžã§èªã‚る大ããªæƒ…å ±æºã¨ã—ã¦æœ‰åãªã®ã¯ã€ã‚ªãƒ©ã‚¤ãƒªãƒ¼ã•ã‚“ã‹ã‚‰å‡ºç‰ˆã•ã‚Œã¦ã„る「Hadoopã€æœ¬ã«ãªã‚Šã¾ã™ã€‚ 本書ã¯ã“ã®æœ¬ã¨è£œå®Œé–¢ä¿‚ã«æœ‰ã‚‹ã¨æ€ã£ã¦ã„
ãã‚ãã‚Hadoopã«ã¤ã„ã¦ã²ã¨ã“ã¨è¨€ã£ã¦ãŠãã‹ - nokunoã®æ—¥è¨˜
ã‚‚ã†ã“ã®æ‰‹ã®è©±é¡Œã¯å‡ºå°½ãã—ãŸæ„ŸãŒã‚ã‚Šã¾ã™ãŒã€æœ€è¿‘Hadoopã«ã¤ã„ã¦è€ƒãˆã‚‹ã“ã¨ãŒå¤šã„ã®ã§ã€ã‚¨ãƒ³ãƒˆãƒªã«ã—ã¦ã¿ã¾ã™ã€‚ãªãŠã€ã“ã“ã§ã¯ãƒ™ãƒ¼ã‚·ãƒƒã‚¯ãªMapReduce+HDFSã®ã“ã¨ã‚’Hadoopã¨å‘¼ã¶ã“ã¨ã«ã—ã¾ã™ã€‚ Hadoopã¨ã¯Hadoopã¨ã¯è¨€ã‚ãšã¨çŸ¥ã‚ŒãŸGoogleã®MapReduce/GFSã®ã‚ªãƒ¼ãƒ—ンソースã®ã‚¯ãƒãƒ¼ãƒ³ã§ã™ã€‚MapReduceã§ã¯ãƒ—ãƒã‚°ãƒ©ãƒžã¯Mapã¨Reduceã¨ã„ã†2ã¤ã®é–¢æ•°ã‚’書ãã ã‘ã§ã€ä¸¦åˆ—分散処ç†ã‚’ã™ã‚‹ã“ã¨ãŒã§ãã¾ã™ã€‚ã“ã‚Œã¯(1) データを実際ã«æŒã¤ãƒžã‚·ãƒ³ã«ãƒ—ãƒã‚°ãƒ©ãƒ ã‚’é…布ã™ã‚‹ (2) Mapã¨Reduceã‚’ã¤ãªãShuffleフェーズã§ã‚ーをグループ化ã—ã¦ã‚½ãƒ¼ãƒˆã™ã‚‹ã€(3) 障害時ã®ãƒ•ã‚§ãƒ¼ãƒ«ã‚ªãƒ¼ãƒãƒ¼ã‚„レプリケーションã€ã¨ã„ã£ãŸå‡¦ç†ã‚’フレームワークå´ãŒå—ã‘æŒã¤ã“ã¨ã«ã‚ˆã£ã¦ã€ãƒ—ãƒã‚°ãƒ©ãƒžå´ã®è² 担を減らã™ã‚‚ã®ã§ã™ã€‚GFSã«å¯¾å¿œã™ã‚‹HDFSã«ã¯ãƒ•ã‚¡ã‚¤ãƒ«ã‚’クラスタã«åˆ†æ•£ã—ã¦ä¿å˜
Hadoopカウントダウン（Yet Another Advent Calendar HAHAHA)
「Hadoop Advent Calendar ã¯ãªã„ã®ã‹ã€ @shiumachi ãŒä½•æ°—ãªãã¤ã¶ã‚„ã„ãŸä¸€è¨€ã« @okachimachiorz1 ã•ã‚“ãŒå応。 ã©ã“㌠Advent Calendar ãªã‚“ã よã¨ã„ã†ãƒ„ッコミもã‚ã‚‹ä¸ã€ãƒŽãƒªã ã‘ã§å§‹ã¾ã£ãŸã“ã®ä¼ç”»ã«æžœãŸã—ã¦å‚åŠ è€…ã¯é›†ã¾ã‚‹ã®ã‹ï¼ï¼Ÿ ルール ・tweet ã« hadoop ã«é–¢ã™ã‚‹ tips を書ã 続ãã‚’èªã‚€
1
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
http://blog.livedoor.jp/tabetabe22/archives/1464573.html
Amazon.co.jp: Hadoop徹底入門: オープンソース分散処ç†ç’°å¢ƒã®æ§‹ç¯‰: 太田一樹: 本
{{#tags}}- {{label}}
{{/tags}}