大è¦æ¨¡ã‚µã‚¤ãƒˆã‚’支ãˆã‚‹ãƒ“ッグデータプラットフォーム技術
2. 自己紹介 Privileged and Confidential 2 é 峯 康夫(ã¨ãŠã¿ã ã‚„ã™ãŠ) 事æ¥æˆ¦ç•¥çµ±æ‹¬æœ¬éƒ¨ データソリューション本部 データインフラ開発部 2010å¹´ æ–°å’入社 Hadoopクラスタ立ã¡ä¸Šã’ã®éƒ¨ç½²ã«é…属 2012å¹´ データソリューションé…属 Hadoopã€ãƒªã‚¢ãƒ«ã‚¿ã‚¤ãƒ 処ç†åŸºç›¤ãªã©ã‚’担当
「LINEã€ã‚’支ãˆã‚‹HBaseã®è£å´ãªã©ã€Hadoop ConferenceãŒé–‹å‚¬
オープンソースソフトウエア（OSS）ã®åˆ†æ•£ãƒãƒƒãƒå‡¦ç†ã‚½ãƒ•ãƒˆã€ŒHadoopã€ã®ãƒ¦ãƒ¼ã‚¶ãƒ¼ä¼šã€ŒHadoop Conference Japan 2013 Winterã€ãŒ2013å¹´1月21æ—¥ã€æ±äº¬ãƒ“ッグサイトã§é–‹å‚¬ã•ã‚ŒãŸï¼ˆå†™çœŸ1）。スマートフォンå‘ã‘コミュニケーションツール「LINEã€ã‚’é‹å–¶ã™ã‚‹NHN Japanã®ä¸æ‘俊介æ°ãŒã€LINEã®ã‚¹ãƒˆãƒ¬ãƒ¼ã‚¸ã¨ã—ã¦åˆ©ç”¨ã™ã‚‹ã€ŒHBaseã€ã®é‹ç”¨ãƒŽã‚¦ãƒã‚¦ã‚’語るãªã©ã€ãƒ¦ãƒ¼ã‚¶ãƒ¼ä¼æ¥ã‚„Hadoop関連ベンダーã«ã‚ˆã‚‹21セッションãŒè¡Œã‚ã‚ŒãŸã€‚ Hadoop Conference JapanãŒé–‹ã‹ã‚Œã‚‹ã®ã¯ã€ä»Šå›žãŒ4回目。冒é ã®ã‚»ãƒƒã‚·ãƒ§ãƒ³ã§ã¯ã€Hadoopã®ã‚ªãƒªã‚¸ãƒŠãƒ«é–‹ç™ºè€…ã§ã‚るダグ・カッティングæ°ï¼ˆApacheソフトウエア財団会長）ãŒãƒ“デオメッセージを寄ã›ã€ä»Šå¾Œã®Hadoopã®é–‹ç™ºæ–¹é‡ãªã©ã‚’説明ã—ãŸã€‚ Hadoopã¯ã€ç±³ã‚°ãƒ¼ã‚°ãƒ«ãŒ2000年代å‰åŠã«è«–文発表ã—ãŸåˆ†æ•£ãƒ•ã‚¡ã‚¤ãƒ«
Hadoopã¯ãƒ“ッグデータã®æ±Žç”¨ãƒ—ラットフォームã§ã‚ã‚Šã€è¡Œãå…ˆã¯ã‚°ãƒ¼ã‚°ãƒ«ãŒç¤ºã—ã¦ã„ã‚‹
Hadoopã¯ãƒ“ッグデータ処ç†ã®æ±Žç”¨ãƒ—ラットフォームã§ã‚ã‚Šã€SQLやジョインやトランザクションãªã©ãŒä½¿ãˆã‚‹ã‚ˆã†ã«ãªã‚‹ã€‚Hadoopã®ç”Ÿã¿ã®è¦ªã§ã‚るダグ・カッティングæ°ã¯ã€éƒ½å†…ã§é–‹å‚¬ã•ã‚ŒãŸæ—¥æœ¬Hadoopユーザー会主催ã®ã‚¤ãƒ™ãƒ³ãƒˆã€ŒHadoop Conference Japan 2013 Winterã€ã«ãƒ“デオメッセージã§å‚åŠ ã€‚Hadoopã®ç¾åœ¨ã€ãã—ã¦å°†æ¥åƒã«ã¤ã„ã¦èªžã‚Šã¾ã—ãŸã€‚ カッティングæ°ãŒèªžã£ãŸHadoopã®å°†æ¥ã¨ã¯ã©ã‚“ãªã‚‚ã®ãªã®ã‹ã€‚ãƒã‚¤ãƒ³ãƒˆã‚’紹介ã—ã¾ã—ょã†ã€‚ ãƒãƒƒãƒå‡¦ç†ã‚’超ãˆç¶šãApache Hadoopã®é€²åŒ– Apache Software Foundationã®Chairmanã§ã‚ã‚ŠClouderaã®Chief Architectã€Doug Cuttingæ°ã€‚ 今日ã¯ã¿ãªã•ã‚“ã¨ä¸€ç·’ã«å‚åŠ ã—ãŸã‹ã£ãŸã®ã§ã™ãŒæ®‹å¿µãªãŒã‚‰ã‹ãªã‚ãšã€ã“ã®ãƒ“デオをãŠé€ã‚Šã™ã‚‹ã“ã¨ã«ãªã‚Šã¾ã—ãŸã€‚ MapRedu
Hadoop Oozieè¨å®šã‹ã‚‰Pigã®PythonUDFを利用ã™ã‚‹ã¾ã§ã®ã¾ã¨ã‚ - Y's note
Hadoop 第2版 作者: Tom White,玉å·ç«œå¸,兼田è–士出版社/メーカー: オライリージャパン発売日: 2011/07/23メディア: 大型本購入: 9人 クリック: 182回ã“ã®å•†å“ã‚’å«ã‚€ãƒ–ãƒã‚° (24件) を見る Oozie Oozieã¨ã¯Hadoop MapReduceã®ã‚¸ãƒ§ãƒ–管ç†ã‚·ã‚¹ãƒ†ãƒ ã®äº‹ã§MapReduceã®å®šæœŸå‡¦ç†åŒ–や複数ã®MapReduceã®å®Ÿè¡Œã—çµæžœã‚’一ã¤ã«ã¾ã¨ã‚ã‚‹ãªã©ä¸€é€£ã®å‡¦ç†ãƒ•ãƒãƒ¼ã¨ã—ã¦å®šç¾©ã™ã‚‹ã“ã¨ãŒã§ãる優れもã®ã§ã™ã€‚Oozie自体ã¯Java/Tomcatã§ä½œã‚‰ã‚Œã¦ã„るよã†ã§ã™ã€‚Oozieã‚’å‹•ã‹ã™ãŸã‚ã«é–‹ç™ºè€…ã¯ä»¥ä¸‹ã®ã‚‚ã®ã‚’用æ„ã—ãªã‘ã‚Œã°ãªã‚Šã¾ã›ã‚“。 ファイル å¿…é ˆ è¨˜è¿°æ–¹å¼ ç”¨é€” è¨ç½®å ´æ‰€ MapReduceプãƒã‚°ãƒ©ãƒ å¿…é ˆ Java,Streaming,Pig/Hiveç‰ MapReduce実行 HDFS workflow å¿…é ˆ xml OozieJo
MapReduce åˆå¿ƒè€…㌠Hadoop ã‚’ã•ã‚ã£ã¦ã¿ãŸã€‚ã‚‚ã¡ã‚ã‚“ C++ ã‹ã‚‰ã€‚ :: handsOut.jp
スライド1: MapReduce åˆå¿ƒè€…ãŒHadoop ã‚’ã•ã‚ã£ã¦ã¿ãŸ~ã‚‚ã¡ã‚ã‚“ C++ ã‹ã‚‰~プãƒã‚°ãƒ©ãƒŸãƒ³ã‚°ç”Ÿæ”¾é€å‹‰å¼·ä¼š 第4回 @åå¤å±‹2010/06/26(土) You&I スライド2: Agenda1. Hadoopã¨ã¯2. MapReduceã¨ã¯3. Hadoopã®æ§‹æˆ4. ãªãœHadoopã‹?5. Hadoopã®ç’°å¢ƒæ§‹ç¯‰6. C++ã‹ã‚‰Hadoopを使ã†7. ã¾ã¨ã‚ スライド3: 0.自己紹介• H/N You&I (èªã¿:ユー アンド アイ)• 出身 生ã¾ã‚Œã‚‚育ã¡ã‚‚åå¤å±‹å¸‚• å¹´é½¢ 30代å‰åŠâ€¢ æœ¬è· å•†å¦éƒ¨å‡ºèº«ã®è·æ¥ãƒ—ãƒã‚°ãƒ©ãƒžâ€¢ 言語 C++, VisualBasic 6.0, 日本語COBOL• 日記 http://d.hatena.ne.jp/youandi/• 所属 大è¦æ¨¡åˆ†æ•£æŠ€è¡“勉強会inåå¤å±‹åå¤å±‹ã‚¢ã‚¸ãƒ£ã‚¤ãƒ«å‹‰å¼·ä¼š*ã‚ã‚“ãã¾åŒç›Ÿ(åå¤å±‹å‹‰å¼·ä¼š)* スライド4
overlasting.net
overlasting.net 2019 Copyright. All Rights Reserved. The Sponsored Listings displayed above are served automatically by a third party. Neither the service provider nor the domain owner maintain any relationship with the advertisers. In case of trademark issues please contact the domain owner directly (contact information can be found in whois). Privacy Policy
Hadoopå‘ã‘基幹ãƒãƒƒãƒåˆ†æ•£å‡¦ç†ã‚½ãƒ•ãƒˆã€ŒAsakusaã€ã®å…¨è²Œ
Hadoopã¯åˆ†æ•£å‡¦ç†ã«ã‚ˆã£ã¦ã€å¤§é‡ãƒ‡ãƒ¼ã‚¿ã®ä¸€æ‹¬å‡¦ç†ã‚’RDBMSよりも大幅ã«é«˜é€ŸåŒ–ã§ãるミドルウエアã§ã€ã“ã‚Œã¾ã§ã¯ãƒã‚°è§£æžãªã©ç‰¹å®šã®åˆ†é‡Žã§ä½¿ã‚ã‚Œã¦ããŸã€‚ã“れをã€åŸºå¹¹ãƒãƒƒãƒå‡¦ç†ã«é©ç”¨ã™ã‚‹ãŸã‚ã®ãƒ•ãƒ¬ãƒ¼ãƒ ワークãŒç™»å ´ã—ãŸã€‚オープンソースソフトウエアã®ã€ŒAsakusaã€ã§ã‚る。 本連載ã§ã¯ã€Asakusaã®é–‹ç™ºè²¬ä»»è€…ãŒãã®å…¨ä½“åƒã‚’解説ã™ã‚‹ã€‚HadoopãŒãªãœé€Ÿã„ã®ã‹ã‚’解説ã—ãŸã‚ã¨ã€Asakusaã®æ§‹æˆè¦ç´ ã‚„è¨è¨ˆæ–¹æ³•ã€å®Ÿéš›ã®ã‚³ãƒ¼ãƒ‡ã‚£ãƒ³ã‚°ä¾‹ã‚’示ã™ã€‚
「Hadoop徹底入門ã€ãŒå‡ºã¾ã™ - Preferred Networks Research & Development
MacBook Air 11インãƒæ¬²ã—ã„ï¼ã€å¤ªç”°ã§ã™ã€‚ 1/27ã«ã€åŸ·ç†ã«é–¢ã‚らã›ã¦é ‚ã„ãŸã€ŒHadoop徹底入門ã€ã¨ã„ã†æœ¬ãŒã€ç¿”泳社ã•ã‚“ã‹ã‚‰å‡ºç‰ˆã•ã‚Œã¾ã™ã€‚ OSS分散フレームワーク「Hadoopã€ã®ã€æ—¥æœ¬èªžã§ã¯åˆã‚ã¦ã¨ãªã‚‹æ›¸ã下ã‚ã—本ã«ãªã‚Šã¾ã™ã€‚執ç†ã¯NTTデータã§Hadoopã®ãŠä»•äº‹ã‚’ã•ã‚Œã¦ã„ã‚‹ã€ä¸‹åž£ã•ã‚“ã€çŒ¿ç”°ã•ã‚“ã€è—¤äº•ã•ã‚“ã€æ¿±é‡Žã•ã‚“ã€ãã—ã¦ç§ã«ãªã‚Šã¾ã™ã€‚ã¾ãŸã€ç¿”泳社ã®çŸ³å·ã•ã‚“ã«ã¯éžå¸¸ã«ãŠä¸–話ã«ãªã‚Šã¾ã—ãŸã€‚ 目次ã¯ã“ã®ãƒ–ãƒã‚°ã®æœ€å¾Œã«æŽ²è¼‰ã•ã›ã¦é ‚ãã¾ã—ãŸ(詳細ã¯ã“ã¡ã‚‰)。Hadoopã¨ã¯ä½•ã‹ï¼Ÿã¨ã„ã£ãŸèª¬æ˜Žã«å§‹ã¾ã‚Šã€Hadoopã®å‘¨è¾ºãƒ—ãƒãƒ€ã‚¯ãƒˆ(Hive, Pig, HBase, Thrift)も詳ã—ãã‚«ãƒãƒ¼ã•ã‚Œã¦ã„ã¾ã™ã€‚ Hadoopã«é–¢ã—ã¦ç¾åœ¨æ—¥æœ¬èªžã§èªã‚る大ããªæƒ…å ±æºã¨ã—ã¦æœ‰åãªã®ã¯ã€ã‚ªãƒ©ã‚¤ãƒªãƒ¼ã•ã‚“ã‹ã‚‰å‡ºç‰ˆã•ã‚Œã¦ã„る「Hadoopã€æœ¬ã«ãªã‚Šã¾ã™ã€‚ 本書ã¯ã“ã®æœ¬ã¨è£œå®Œé–¢ä¿‚ã«æœ‰ã‚‹ã¨æ€ã£ã¦ã„
NTTデータã®Hadoopå ±å‘Šæ›¸ãŒã™ã”ã‹ã£ãŸ - 科å¦ã¨éžç§‘å¦ã®è¿·å®®
æ¥ç•Œãƒˆãƒƒãƒ— ã®ã‚¨ãƒ³ã‚¿ãƒ¼ãƒ—ライズ Hadoop ä¼æ¥ Cloudera ã«å…¥ç¤¾ã—ã¾ã—㟠http://www.cloudera.co.jp/ 今年ã®6月ã«ã€ã€Œå¹³æˆï¼’１年度 産å¦é€£æºã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢å·¥å¦å®Ÿè·µäº‹æ¥å ±å‘Šæ›¸ã€ã¨ã„ã†ãƒ‰ã‚ュメント群ãŒçµŒç”£çœã‹ã‚‰å…¬è¡¨ã•ã‚Œã¾ã—ãŸã€‚ ãã®ã†ã¡ã®ä¸€ã¤ã«ã€NTTデータã«å§”託ã•ã‚ŒãŸHadoopã«é–¢ã™ã‚‹å®Ÿè¨¼å®Ÿé¨“ã®å ±å‘Šæ›¸ãŒã‚ã‚Šã¾ã—ãŸã®ã§ã€ä»Šæ›´ãªãŒã‚‰èªã‚“ã§ã¿ã‚‹ã“ã¨ã«ã—ã¾ã—ãŸã€‚ Hadoop界隈ã®äººã¯ã‚‚ã†ã¿ã‚“ãªã¨ã£ãã«èªã‚“ã§ã‚‹ã®ã‹ã‚‚ã—ã‚Œã¾ã›ã‚“ã‘ã©ã€‚ http://www.meti.go.jp/policy/mono_info_service/joho/downloadfiles/2010software_research/clou_dist_software.pdf ã€Œé«˜ä¿¡é ¼ã‚¯ãƒ©ã‚¦ãƒ‰å®Ÿç¾ç”¨ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢é–‹ç™ºï¼ˆåˆ†æ•£åˆ¶å¾¡å‡¦ç†æŠ€è¡“ç‰ã«ä¿‚ã‚‹ãƒ‡ãƒ¼ã‚¿ã‚»ãƒ³ã‚¿ãƒ¼é«˜ä¿¡é ¼åŒ–ã«å‘ã‘ãŸå®Ÿè¨¼äº‹æ¥ï¼‰ã€ã¨ã„ã†
Mahoutã®ã‚µãƒ³ãƒ—ルプãƒã‚°ãƒ©ãƒŸãƒ³ã‚° - プãƒã‚°ãƒ©ãƒžã§ã‚ã‚ŠãŸã„
ã¡ã‚‡ã£ã¨ç©ºã„ãŸæ™‚é–“ã«Tasteã®å¾Œã‚’継ãオープンソースã®ãƒªã‚³ãƒ¡ãƒ³ãƒ‰ã‚¨ãƒ³ã‚¸ãƒ³ã®Mahoutを触ã£ã¦ã¿ã¾ã—ãŸã€‚ã¾ã 使ã„ã“ãªã›ã¦ã„ãªã„ã§ã™ãŒã€ã‹ãªã‚Šé¢ç™½ãã†ãªã‚¢ãƒ—リã§ã™ã€‚ 今回ã¯Livedoor Clipsã®ãƒ‡ãƒ¼ã‚¿ã‚’使ã£ã¦ã€URLã«å¯¾ã—ã¦ãŠå‹§ã‚ã®ã‚¿ã‚°ã¨ã‚¿ã‚°ã«å¯¾ã—ã¦ãŠå‹§ã‚ã®ã‚¿ã‚°ã‚’出ã—ã¦ã¿ã¾ã—ãŸã€‚ã‚¿ã‚°æƒ…å ±ã‚’ä½¿ã„ã‚„ã™ã„よã†ã«æ•´å½¢ã—ã¦ã„ã‚‹ã®ã§ã€è©³ã—ãã¯ã€Œlivedoor clipsã®ãƒ‡ãƒ¼ã‚¿ã‚’å°‘ã—ã ã‘眺ã‚ã¦ã¿ãŸã€‚ã€ã‚’å‚ç…§ã—ã¦ãã ã•ã„。 import java.io.File; import java.io.FileNotFoundException; import java.util.List; import org.apache.mahout.cf.taste.common.TasteException; import org.apache.mahout.cf.taste.impl.model.file
Hadoopを使ã„ã“ãªã™(3)
ãƒ¤ãƒ•ãƒ¼æ ªå¼ä¼šç¤¾ã¯ã€2023å¹´10月1æ—¥ã«LINEãƒ¤ãƒ•ãƒ¼æ ªå¼ä¼šç¤¾ã«ãªã‚Šã¾ã—ãŸã€‚LINEãƒ¤ãƒ•ãƒ¼æ ªå¼ä¼šç¤¾ã®æ–°ã—ã„ブãƒã‚°ã¯ã“ã¡ã‚‰ã§ã™ã€‚LINEヤフー Tech Blog ã“ã‚“ã«ã¡ã¯ã€R&D統括本部ã®å‰ç”°ã§ã™ã€‚ å‰å›žã¨å‰ã€…回ã®è¨˜äº‹ã§ã¯ã€Hadoopã®ã‚«ã‚¹ã‚¿ãƒžã‚¤ã‚ºãƒã‚¤ãƒ³ãƒˆã‚’解説ã—ã¾ã—ãŸã€‚ å˜ç´”ãªå•é¡Œã«å¯¾ã—ã¦ã¯ã€map関数ã¨reduce関数ã®çµ„ã¿åˆã‚ã›ã ã‘ã§ã‚‚ã€å‡¦ç†ã‚’è¡Œã†ã“ã¨ãŒã§ãã¾ã™ãŒã€ã‚る程度複雑ãªå•é¡Œã«å¯¾ã—ã¦ã¯ã€ä»Šã¾ã§ã«è§£èª¬ã—ãŸã‚«ã‚¹ã‚¿ãƒžã‚¤ã‚ºãƒã‚¤ãƒ³ãƒˆã®æ´»ç”¨ãŒé‡è¦ã«ãªã‚‹ã¨ã„ã†è©±ã§ã—ãŸã€‚ 今回ã¯å®Ÿéš›ã®ã‚µãƒ¼ãƒ“スã®äº‹ä¾‹ã‚’紹介ã—ã€ã‚«ã‚¹ã‚¿ãƒžã‚¤ã‚ºãƒã‚¤ãƒ³ãƒˆãŒã©ã†æ´»ç”¨ã•ã‚Œã¦ã„ã‚‹ã‹ç´¹ä»‹ã—ãŸã„ã¨æ€ã„ã¾ã™ã€‚ ABYSS ABYSSã®äº‹ä¾‹ã‚’紹介ã—ã¾ã—ょã†ã€‚ ABYSSã¨ã¯ã€æ¤œç´¢ã‚µãƒ¼ãƒ“スを簡å˜ã«æ§‹ç¯‰ã§ãる社内プラットフォームã®ã“ã¨ã§ã€è©³ã—ãã¯ä»¥ä¸‹ã®TechBlog記事ã§ç´¹ä»‹ã—ã¦ã„ã¾ã™ã€‚先日無事ã«ç¤¾å†…リリースã•ã‚Œã¾ã—ãŸã€‚ 新検索
Apache Mahout - Overview
For Creating Scalable Performant Machine Learning Applications Download Mahout Apache Mahout(TM) is a distributed linear algebra framework and mathematically expressive Scala DSL designed to let mathematicians, statisticians, and data scientists quickly implement their own algorithms. Apache Spark is the recommended out-of-the-box distributed back-end, or can be extended to other distributed backe
Hadoopを使ã„ã“ãªã™(2)
ãƒ¤ãƒ•ãƒ¼æ ªå¼ä¼šç¤¾ã¯ã€2023å¹´10月1æ—¥ã«LINEãƒ¤ãƒ•ãƒ¼æ ªå¼ä¼šç¤¾ã«ãªã‚Šã¾ã—ãŸã€‚LINEãƒ¤ãƒ•ãƒ¼æ ªå¼ä¼šç¤¾ã®æ–°ã—ã„ブãƒã‚°ã¯ã“ã¡ã‚‰ã§ã™ã€‚LINEヤフー Tech Blog ã“ã‚“ã«ã¡ã¯ã€ å‰å›žã®Hadoopã®è¨˜äº‹ ã«å¼•ã続ãã€MapReduceã®ã‚«ã‚¹ã‚¿ãƒžã‚¤ã‚ºãƒã‚¤ãƒ³ãƒˆã‚’解説ã—ã¦ã„ãã¾ã™ã€‚ å‰å›žã®è¨˜äº‹ã®å›³ã‚„ã€è¡¨ãªã©ã‚’å‚ç…§ã—ãªãŒã‚‰èªã¿é€²ã‚ã¦ã„ãŸã ã‘ã‚Œã°ã¨æ€ã„ã¾ã™ã€‚ Mapperã‚„Reducerã®æµã‚Œã®åˆ¶å¾¡ Mapperã®å®Ÿè¡Œã®æµã‚Œã¯ã€ãƒ‡ãƒ•ã‚©ãƒ«ãƒˆã§ã¯ã€åˆæœŸåŒ–処ç†ã‚’è¡Œã£ãŸå¾Œã€map関数を繰り返ã—実行ã—ã€çµ‚了処ç†ã‚’è¡Œã†ã‚ˆã†ã«ãªã£ã¦ã„ã¾ã™ãŒã€ã“ã®æµã‚Œè‡ªä½“を制御ã™ã‚‹ã“ã¨ãŒã§ãã¾ã™ã€‚ å¤ã„APIã§ã¯ã€MapRunnerを通ã˜ã¦ã“ã®æµã‚Œã‚’制御ã§ãã¾ã™ãŒã€0.20.0ã‹ã‚‰ã®æ–°ã—ã„APIã§ã¯å˜ç´”ã«Mapperクラスã®run関数をオーãƒãƒ¼ãƒ©ã‚¤ãƒ‰ã™ã‚‹ã“ã¨ã§ã€è¡Œãˆã¾ã™ã€‚ デフォルトã®run関数ã¯ä»¥ä¸‹ã®é€šã‚Šã§ã™ã€‚ public vo
Hadoop プãƒã‚°ãƒ©ãƒ ã®å˜ç´”ãªãƒ‡ãƒãƒƒã‚°æ–¹æ³•ã«ã¤ã„㦠- takahi-iã®æ—¥è¨˜
最近 Hadoop ライブラリを用ã„ã¦æ›¸ã‹ã‚ŒãŸãƒ—ãƒã‚°ãƒ©ãƒ をデãƒãƒƒã‚°ã™ã‚‹æ–¹æ³•ã«ã¤ã„ã¦èª¿ã¹ã¦ã¾ã—ãŸã€‚標準エラー出力を使用ã™ã‚‹æ–¹æ³•ã¨ Context オブジェクトを利用ã™ã‚‹æ–¹æ³•ãŒç°¡å˜ãªã‚ˆã†ã§ã™ã€‚ 標準エラー出力㫠Hadoop プãƒã‚°ãƒ©ãƒ ã‹ã‚‰å‡ºåŠ›ã™ã‚‹ã¨ã€ãƒ—ãƒãƒ³ãƒ—トã«ã¯å‡ºåŠ›ã•ã‚Œãªã„ã®ã§ã™ãŒã€ã¨ã‚ã‚‹ãƒã‚°ãƒ•ã‚¡ã‚¤ãƒ«ã«ã¯å‡ºåŠ›ã•ã‚Œã¾ã™ã€‚ã¾ãŸã€ã‚ªãƒ–ジェクト Context (昔㯠Reporter オブジェクトを使用ã—ã¦ã„ã¾ã—ãŸãŒ 0.2 以é™ã¯ Context を使用ã™ã‚‹æ–¹ãŒè‰¯ã„らã—ã„ã§ã™) を利用ã—ã¦ã€åˆ¥ã®å ´æ‰€ã«å‡ºåŠ›ã™ã‚‹ã“ã¨ã‚‚ã§ãã¾ã™ã€‚ 以下デãƒãƒƒã‚°ç”¨ã®æ–‡ã‚’å«ã‚€å˜èªžã‚«ã‚¦ãƒ³ãƒˆãƒ—ãƒã‚°ãƒ©ãƒ を書ãã¾ã—ãŸã€‚ã“ã®ãƒ—ãƒã‚°ãƒ©ãƒ ã¯é€šå¸¸ã®å˜èªžã‚«ã‚¦ãƒ³ãƒˆãƒ—ãƒã‚°ãƒ©ãƒ ãªã®ã§ã™ãŒã€'invalid' ã¨ã„ã†å˜èªžã®å ´åˆã ã‘ã¯ã‚«ã‚¦ãƒ³ãƒˆã‚’è¡Œã‚ãšã€ä¸æ£ãªå…¥åŠ›ã¨ã—ã¦è¦å‘Šã—ã¾ã™ (人工的ãªã‚µãƒ³ãƒ—ルã§ç”³ã—訳ã”ã–ã„ã¾ã›ã‚“)。ã¾ãŸå…¥åŠ›ãƒ•ã‚¡ã‚¤ãƒ«ã«å…¥ã£ã¦ã„
本をèªã‚€ GREE Labsã§Hadoopã®è©±ã‚’èžã„ã¦ããŸ
GREEã•ã‚“ã§ä¸å®šæœŸã§ã‚„ã£ã¦ã‚‹ã€GREE Labsオープンソーステクノãƒã‚¸ãƒ¼å‹‰å¼·ä¼šã§ã€Hadoopã®è©±ã‚’èžã„ã¦ãã¾ã—ãŸã€‚Hadoopã¯ã€ã¤ã¾ã‚Šã¯Googleã®GFSã‚„MapReduceã®ã‚¯ãƒãƒ¼ãƒ³ã ãã†ã§ã€ã€ŒGoogleを支ãˆã‚‹æŠ€è¡“ã€ã«ãƒˆã‚メã„ãŸäººãªã‚‰å¿…見ã§ã™ã。 発表ã¯ã€æŠ€è¡“é¢ã‚’ç°¡æ½”ã«æŠ¼ã•ãˆãŸã†ãˆã§ã‚ã‹ã‚Šã‚„ã™ãã€ãã®ã†ãˆå®Ÿéš›ã®åˆ©ç”¨äº‹ä¾‹ã®è©±ã‚‚èžã‘ãŸã®ãŒé¢ç™½ã‹ã£ãŸã¨æ€ã„ã¾ã™ã€‚最近ã®Webç³»ã§ã¯ã€ã‚µãƒ¼ãƒ“スé¢ã§ã‚‚マãƒã‚¿ã‚¤ã‚ºé¢ã§ã‚‚ã€ãƒ‡ãƒ¼ã‚¿ãƒžã‚¤ãƒ‹ãƒ³ã‚°ã¨ã‹è¡Œå‹•ã‚¿ãƒ¼ã‚²ãƒ†ã‚£ãƒ³ã‚°ã¨ã‹ãŒã‚¢ãƒ„ã„ã‚“ã ãªãã¨æ€ã„ã¾ã—ãŸã€‚ プレゼン資料もust録画も公開ã•ã‚Œã¦ã„ã¾ã™ãŒã€ä»¥ä¸‹ã€è‡ªåˆ†ã®ãƒ¡ãƒ¢ã¨ã„ã†æ„味ã§è¨˜éŒ²ã—ã¦ãŠãã¾ã™ã€‚ Hadoopã«ã¤ã„ã¦ï¼ˆå¤ªç”°ä¸€æ¨¹ï¼‰ Preferred Infrastructureã®CTOã§ã€Sedueã®ä½œè€…。大é‡ã®ãƒ‡ãƒ¼ã‚¿ã®å‡¦ç†ãŒãƒ†ãƒ¼ãƒžã§ã€åŠåˆ†ã¯é…’ã§ã§ãã¦ã„ã‚‹w。ãã‚“ãªã“ã‚“ãªã§ã€ã¯ã¦ãƒ–検索ã§ã‚‚使ã‚ã‚Œã¦ã„
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
http://www.zusaar.com/event/437104
Redirect
English (US)
Re: MapFileOutputFormat in new 0.20 MapReduce API ?
Googleã®åŸºç›¤ã‚¯ãƒãƒ¼ãƒ³ Hadoopã«ã¤ã„ã¦
{{#tags}}- {{label}}
{{/tags}}