Google Code Archive - Long-term storage for Google Code Project Hosting.Code Archive Skip to content Google About Google Privacy Terms
Hadoop 分散ファイルシステム: アーã‚テクãƒãƒ¥ã‚¢ã¨è¨è¨ˆ 2008 å¹´ 9 月 30 æ—¥ 1 ã¯ã˜ã‚ã« Hadoop 分散ファイルシステム(HDFS) ã¯ã‚³ãƒ¢ãƒ‡ã‚£ãƒ†ã‚£ãƒ»ãƒãƒ¼ãƒ‰ã‚¦ã‚§ã‚¢ã§å®Ÿè¡Œã•ã‚Œã‚‹ã‚ˆã†ã«è¨è¨ˆã•ã‚ŒãŸåˆ† 散ファ��
Hadoop 分散ファイルシステム: アーã‚テクãƒãƒ¥ã‚¢ã¨è¨è¨ˆ 2008 å¹´ 9 月 30 æ—¥ 1 ã¯ã˜ã‚ã« Hadoop 分散ファイルシステム(HDFS) ã¯ã‚³ãƒ¢ãƒ‡ã‚£ãƒ†ã‚£ãƒ»ãƒãƒ¼ãƒ‰ã‚¦ã‚§ã‚¢ã§å®Ÿè¡Œã•ã‚Œã‚‹ã‚ˆã†ã«è¨è¨ˆã•ã‚ŒãŸåˆ† 散ファイルシステムã§ã™ã€‚æ—¢å˜ã®åˆ†æ•£ãƒ•ã‚¡ã‚¤ãƒ«ã‚·ã‚¹ãƒ†ãƒ ã¨ã®å¤šãã®é¡žä¼¼ç‚¹ã‚’æŒã£ã¦ã„ã¾ã™ãŒã€ä»–ã®åˆ†æ•£ãƒ•ã‚¡ イルシステムã¨ã®é•ã„ã¯é‡è¦ã§ã™ã€‚HDFS ã¯é«˜åº¦ãªãƒ•ã‚©ãƒ¼ãƒ«ãƒˆãƒ»ãƒˆãƒ¬ãƒ©ãƒ³ãƒˆæ€§ã‚’æŒã¡ã€å»‰ä¾¡ãªãƒãƒ¼ãƒ‰ã‚¦ã‚§ ã‚¢ã§å±•é–‹ã™ã‚‹ã‚ˆã†è¨è¨ˆã•ã‚Œã¦ã„ã¾ã™ã€‚HDFS ã¯ã‚¢ãƒ—リケーション・データã¸ã®ç”Ÿç”£æ€§ã®é«˜ã„アクセスをæ ä¾›ã—ã€å¤§è¦æ¨¡ãªãƒ‡ãƒ¼ã‚¿ã‚»ãƒƒãƒˆã‚’利用ã™ã‚‹ã‚¢ãƒ—リケーションã«ãµã•ã‚ã—ã„システムã§ã™ã€‚ファイルシステム・ データã¸ã®ã‚¹ãƒˆãƒªãƒ¼ãƒŸãƒ³ã‚°ãƒ»ã‚¢ã‚¯ã‚»ã‚¹ã‚’å¯èƒ½ã«ã™ã‚‹ãŸã‚ã€HDFS 㯠POSIX requirement を幾分緩ã‚ã¦ã„ã¾ ã™ã€‚HDFS ã¯å…ƒã€… Apache Nutch Web 検索エン
ブラウザã§Map Reduce風味ã®ä¸¦åˆ—分散処ç†
This document discusses MapReduce and its implementation using JavaScript and Ruby on Rails (JS + R). It provides an overview of MapReduce and how it works, describes a word count example to demonstrate MapReduce, and discusses implementing MapReduce across multiple servers using Ajax and Comet for real-time updates.Read less
å®Ÿè·µï¼ ã€ŒMapReduceã§ãƒ†ã‚ストマイニングã€å¾¹åº•è§£èª¬
「é’空文庫ã€ã‚’テã‚ã‚¹ãƒˆãƒžã‚¤ãƒ‹ãƒ³ã‚°ï¼ å‰å›žã®ã€Œã„ã¾ã•ã‚‰èžã‘ãªã„Hadoopã¨ãƒ†ã‚ストマイニング入門ã€ã§ã¯ã€Hadoopã¨ãƒ†ã‚ストマイニングã®æ¦‚è¦ã‚„構æˆã€MapReduceã®ä»•çµ„ã¿ã€Hadoopã®æ´»ç”¨å ´é¢ãªã©ã‚’解説ã—ã€Hadoopã®å®Ÿè¡Œç’°å¢ƒã‚’構築ã—ã¾ã—ãŸã€‚今回ã‹ã‚‰ã€Hadoopを使ã„ã€ãƒ†ã‚ストマイニングã®MapReduceプãƒã‚°ãƒ©ãƒ を作æˆã—ã¦ã„ãã¾ã™ã€‚ 「é’空文庫ã€ã¨ã„ã†ã‚µã‚¤ãƒˆã‚’ã”å˜ã˜ã§ã—ょã†ã‹ã€‚é’空文庫ã¯ã€è‘—作権ãŒåˆ‡ã‚ŒãŸæ—¥æœ¬ã®æ–‡å¦ä½œå“を掲載ã—ã¦ã„ã‚‹Webサイトã§ã€é’空文庫ã®å…¨ãƒ‡ãƒ¼ã‚¿ã‚’DVDã‚„ã€BitTorrentã«ã‚ˆã‚‹é…ä¿¡ã§å…¥æ‰‹ã§ãã¾ã™ã€‚今回ã¯ã€ã“ã®ãƒ‡ãƒ¼ã‚¿ã‚’使ã£ã¦ãƒ†ã‚ストマイニングを行ã„ã¾ã—ょã†ã€‚ å‰å›žã€ãƒ†ã‚スト分類ã§ã€è‘—者ã®æ€§åˆ¥ã€å¹´é½¢ã€åœ°åŸŸã€è·æ¥ãªã©ã®å±žæ€§ã‚‚推定ã§ãã‚‹ã¨æ›¸ãã¾ã—ãŸãŒã€é’空文庫ã¯ã€ä»–ã®ãƒ‡ãƒ¼ã‚¿ã«ã¯ãªã„ã€è‘—者属性ãŒã‚ã‚Šã¾ã™ã€‚é’空文庫ã®ä½œå“ã¯ã€è‘—作権ãŒåˆ‡ã‚Œã¦ã€ä½œè€…ãŒãªããªã£ã¦ã„ã‚‹å ´
第28回　Rubyã¨Hadoopã§åˆ†æ•£å‡¦ç†ã€€Hadoop Streamingã®ä»•çµ„ã¿ | gihyo.jp
ã¯ã˜ã‚ã« Hadoopã¨ã¯ã€Googleã®åŸºç›¤æŠ€è¡“ã§ã‚ã‚‹MapReduceã‚’Javaã§ã‚ªãƒ¼ãƒ—ンソース実装ã—ãŸã‚‚ã®ã§ã€åˆ†æ•£å‡¦ç†ã®ãƒ•ãƒ¬ãƒ¼ãƒ ワークã§ã™ã€‚Hadoopを使ã†ã¨ã€1å°ã®ã‚µãƒ¼ãƒã§ã¯æ™‚é–“ã®æŽ›ã‹ã‚‹ã‚ˆã†ãªå‡¦ç†ã‚’ã€è¤‡æ•°ã®ã‚µãƒ¼ãƒã§åˆ†æ•£å‡¦ç†ã•ã›ã‚‹ã“ã¨ãŒã§ãã¾ã™ã€‚「â 処ç†ã‚’割り振ã£ãŸã‚µãƒ¼ãƒãŒå£Šã‚ŒãŸå ´åˆã©ã†ã™ã‚‹ã‹ã€ãªã©ã®è€éšœå®³æ€§ã®å•é¡Œã‚‚HadoopãŒç®¡ç†ã—ã¦ãれるãŸã‚ã€åˆ©ç”¨è€…ã¯å‡¦ç†ã®ã‚¢ãƒ«ã‚´ãƒªã‚ºãƒ ã®ã¿ã«é›†ä¸ã™ã‚‹ã“ã¨ãŒã§ãã‚‹ã®ã§ã™ã€‚ç´ æ™´ã‚‰ã—ã„ã§ã™ã。最近ã§ã¯Yahoo!ã‚„ã¯ã¦ãªãªã©ã€æ§˜ã€…ãªä¼æ¥ã§ã‚‚利用ã•ã‚Œã‚‹ã‚ˆã†ã«ãªã£ã¦ãã¦ã„ã¾ã™ã€‚ Hadoopå°Žå…¥ã®èƒŒæ™¯ ç†è€…ã¯ã‚¯ãƒƒã‚¯ãƒ‘ãƒƒãƒ‰æ ªå¼ä¼šç¤¾ã«å‹¤ã‚ã¦ã„ã¾ã™ã€‚open('http://cookpad.com'); return false;">クックパッドã¨ã„ã†ã‚µã‚¤ãƒˆãŒæœ‰åã ã¨æ€ã„ã¾ã™ãŒã€ä»–ã«ã‚‚æºå¸¯ç‰ˆã‚¯ãƒƒã‚¯ãƒ‘ッドã§ã‚ã‚‹open('http://m.cookpad.co
1
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
Home
{{#tags}}- {{label}}
{{/tags}}