GitHub - datawrangling/trendingtopics: Rails app for tracking trends in server logs - powered by the Cloudera Hadoop Distribution on EC2You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
“統計ã®åŸºç¤Žã‚’無視ã—ã¦ã„ã‚‹â€Hadoop使ã„ãŒè€ƒãˆã‚‹ãƒ“ッグデータ
Hadoopã‚’ãƒãƒƒãƒå‡¦ç†ã®é«˜é€ŸåŒ–ã«æ´»ç”¨ã—ã¦ã„るノーãƒãƒ©ã‚¹ãƒ»ãƒ†ã‚¯ãƒŽãƒã‚¸ãƒ¼ã‚ºã¯ã€ãƒ“ッグデータã®ãƒ–ームã«çœŸã£å‘ã‹ã‚‰ç•°è«–ã‚’å”±ãˆã‚‹ã€‚「ビッグデータã¯ä¸èº«ã®ãªã„ãƒã‚ºãƒ¯ãƒ¼ãƒ‰ã€ã¨æ–言ã™ã‚‹ä»£è¡¨å–ç· å½¹ç¤¾é•· 神林飛志æ°ã«ã€ãã®çœŸæ„ã‚’èžã„ãŸã€‚ Hadoopï¼ãƒ“ッグデータã¯å¤§ããªèª¤è§£ ノーãƒãƒ©ã‚¹ãƒ»ãƒ†ã‚¯ãƒŽãƒã‚¸ãƒ¼ã‚ºã¯ã€åŸºå¹¹ç³»ã‚·ã‚¹ãƒ†ãƒ å‘ã‘ã®ãƒŸãƒ‰ãƒ«ã‚¦ã‚§ã‚¢ã‚’手ãŒã‘る国産ベンãƒãƒ£ãƒ¼ã€‚Webサービスã®ã‚ˆã†ã«æ±ºã—ã¦æ´¾æ‰‹ã§ã¯ãªã„ãŒã€ã€Œãã‚‚ãもダウンã™ã‚‹ã¨ã€é£›è¡Œæ©ŸãŒé£›ã°ãªã„ã¨ã‹ã€ç—…院ã§äººãŒæ»ã‚“ã§ã—ã¾ã†ã¨ã‹ã€é›»è»ŠãŒå‹•ã‹ãªã„ã¨ã‹ã€ç”Ÿæ´»ã«å½±éŸ¿ãŒå‡ºã‚‹åˆ†é‡Žã€ï¼ˆç¥žæž—æ°ï¼‰ã¨ã„ã†ã€ã¾ã•ã«ãƒŸãƒƒã‚·ãƒ§ãƒ³ã‚¯ãƒªãƒ†ã‚£ã‚«ãƒ«ãªé ˜åŸŸã®ITã§ã€åŒç¤¾ã®è£½å“ã¯æ´»ç”¨ã•ã‚Œã¦ã„る。 åŒç¤¾ã®ã€ŒAsakusa Frameworkã€ã¯ã€Hadoopを活用ã—ãŸåˆ†æ•£å‡¦ç†ã«ã‚ˆã‚Šã€åŸºå¹¹ç³»ãƒãƒƒãƒã®é«˜é€ŸåŒ–を実ç¾ã™ã‚‹ã€‚神林æ°ã¯ã€ã€ŒHadoopã¨ã„ã†ã¨ã€Webã‚„SNSç³»ã€BIやデータ解æžã§ã®ä½¿ã„æ–¹ãŒãƒ¡
Cloudera Distribution for Hadoopã®ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«æ–¹æ³• - moratorium
Cloudera Distribution for Hadoopã®ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«æ–¹æ³• 2009-11-03 (Tue) 1:08 Hadoop 昔色々ã¨è¨˜äº‹ã‚’書ãã¾ã—ãŸãŒã€ï¼‘å¹´åŠçµŒã£ã¦ã€ã‚‚ã¯ã‚„内容ãŒå¤ããªã£ã¦æ¥ã¾ã—ãŸã€‚ Hadoopã®ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«ã¯ã€æœ€è¿‘ã¯Cloudera Distribution for Hadoopを使用ã™ã‚‹ã®ãŒä¸€èˆ¬çš„ãªã‚ˆã†ãªã®ã§ã€ã“ã¡ã‚‰ã§ã®ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«æ–¹æ³•ã‚’紹介ã—ã¾ã™ã€‚ ã¾ãšã¯EC2ã§ï¼’インスタンス立ã¡ä¸Šã’ã¾ã™ã€‚一ã¤ãŒNameNode/JobTracker用ã€ã‚‚ã†ä¸€ã¤ãŒDataNode/TaskTracker用ã§ã™ã€‚ä»®ã«ã€ãƒ›ã‚¹ãƒˆåã‚’master, slaveã¨ã—ã¦ãŠãã¾ã™ã€‚OSã¯CentOSãŒæŽ¨å¥¨ã•ã‚Œã¦ã„ã¾ã™ã€‚ 次ã«Cloudera Configuratorã«ã‚¢ã‚¯ã‚»ã‚¹ã—ã€ä½¿ç”¨ã™ã‚‹ã‚¯ãƒ©ã‚¹ã‚¿ã®æ§‹æˆãªã©ã‚’入力ã—ã¾ã™ã€‚ãれらã®æƒ…å ±(例：ノードã®ã‚³ã‚¢æ•°ãƒ»ãƒ¡ãƒ¢ãƒªå®¹é‡ãƒ»å°æ•°ãªã©)ã‹ã‚‰
「クックパッドã¨Hadoopã€è³‡æ–™ãŒè‰¯ã„ - OneRingToFind
クックパッドã•ã‚“ã€ä¸èº«ãŒæ¿ƒã„社内勉強会やã£ã¦ã¾ã™ã。 「クックパッドã¨Hadoop〠Hadoop introductionView more presentations from ryo katsuma.
Amazonã€ã‚¦ã‚£ã‚¶ãƒ¼ãƒ‰ã ã‘ã§ä½¿ãˆã‚‹Hadoopサービス「Amazon Elastic MapReduceã€é–‹å§‹ | gihyo.jp
濃縮還元オレンジニュース Amazonã€ã‚¦ã‚£ã‚¶ãƒ¼ãƒ‰ã ã‘ã§ä½¿ãˆã‚‹Hadoopサービス「Amazon Elastic MapReduceã€é–‹å§‹ ç±³Amazonã®å会社ã§ã‚ã‚‹Amazon Web Services（AWS）ã¯ã€2009å¹´4月2æ—¥ã«Hadoopを使ã£ã¦åˆ†æ•£å‡¦ç†ã‚’è¡Œã†ç’°å¢ƒã€ŒAmazon Elastic MapReduceã€ã®Î²ã‚µãƒ¼ãƒ“スを開始ã—ã¾ã—ãŸï¼ˆå›³1â ）â 。AWSãŒæä¾›ã—ã¦ã„る仮想サーãƒç’°å¢ƒã®Amazon EC2やストレージサービスã®Amazon S3を組ã¿åˆã‚ã›ã¦ã€Hadoopã«ã‚ˆã‚‹MapReduce処ç†ã‚’è¡Œãˆã‚‹ã‚ˆã†ã«ãªã£ã¦ã„ã¾ã™ã€‚ 図1　Amazon Elastic MapReduce ã“ã‚Œã¾ã§ã€ãƒã‚°è§£æžãªã©ã®å¤§é‡ãªãƒ‡ãƒ¼ã‚¿ã‚’処ç†ã—ãŸã‚Šã€ç§‘å¦è¨ˆç®—ãªã©ã®æ™‚é–“ãŒã‹ã‹ã‚‹å‡¦ç†ã‚’è¡Œã£ãŸã‚Šã™ã‚‹ã«ã¯ã€å¤§å®¹é‡ã®ã‚¹ãƒˆãƒ¬ãƒ¼ã‚¸ã‚„高性能ã®ã‚µãƒ¼ãƒãŒå¿…è¦ã§ã—ãŸã€‚ã—ã‹ã—ã€é »ç¹ã«åˆ©ç”¨ã™ã‚‹ã®ã§ãªã‘ã‚Œã°ã€ãƒžã‚·ãƒ³ã®
1
ランã‚ング
ランã‚ング
ランã‚ング
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
IBM Developer
GitHub - mrflip/wukong: Ruby on Hadoop: Efficient, effective Hadoop streaming & bulk data processing. Write micro scripts for terabyte-scale data
{{#tags}}- {{label}}
{{/tags}}