日経コンピュータ編集部ã®ä¸ç”°ãŒã€æ—¥æœ¬ Java ユーザグループ（JJUG）ãŒé–‹å‚¬ã—ãŸã€ŒJJUG Cross Community Conference 2009 Fallã€ã§è¡Œã£ãŸè¬›æ¼”ã®ã‚¹ãƒ©ã‚¤ãƒ‰ã§ã™ 連絡先㯠[email protected] less
データセンター視点ã§æ¯”較ã—ãŸã‚¯ãƒ©ã‚¦ãƒ‰ã®å†…å´
日経コンピュータ編集部ã®ä¸ç”°ãŒã€æ—¥æœ¬ Java ユーザグループ（JJUG）ãŒé–‹å‚¬ã—ãŸã€ŒJJUG Cross Community Conference 2009 Fallã€ã§è¡Œã£ãŸè¬›æ¼”ã®ã‚¹ãƒ©ã‚¤ãƒ‰ã§ã™ 連絡先㯠[email protected] less
scale out ã®æŠ€è¡“ 〜 consistent hashing ç·¨ (cloud ç ”ç©¶ä¼š, December 19, 2008)
scale out ã®æŠ€è¡“ 〜 consistent hashing ç·¨ 首藤 一幸 2008å¹´ 12月 19æ—¥ cloud ç ”ç©¶ä¼š (丸山ä¸äºŒå¤«æ°ä¸»å®°) スライド: shudo-cloud-scaleout-20081219.pdf (PDF ファイル, 840 KB) 関連資料: オーãƒãƒ¬ã‚¤ã«ã‚ˆã‚‹åˆ†æ•£ã‚ャッシュ: ウェブページ (21 pages, HTML) Unstructured overlay 㨠Sturectured overlay: ウェブページ (34 pages, HTML) Back to Publications ã®ãƒšãƒ¼ã‚¸ 首藤ã®ãƒšãƒ¼ã‚¸ scale out ã®æ–¹ç–
Hadoopã®è§£æžè³‡æ–™
オープンソース分散システム「Hadoopã€ã«é–¢ã™ã‚‹è§£æžè³‡æ–™ã‚’公開ã•ã›ã¦é ‚ã„ã¦ãŠã‚Šã¾ã™ã€‚ã“ã®èª¿æŸ»ã¯NTTãƒ¬ã‚¾ãƒŠãƒ³ãƒˆæ ªå¼ä¼šç¤¾æ§˜ã¨å…±åŒã§è¡Œã„ã¾ã—ãŸ(プレスリリース)。 Hadoop解æžè³‡æ–™(PDF), 最終更新: 2008/08/25, 公開: 2008/08/25 Hadoopã®å®Ÿéš›ã®ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«æ–¹æ³•ãªã©ã«ã¤ãã¾ã—ã¦ã¯ã€å¼Šç¤¾å¤ªç”°ã«ã‚ˆã‚‹ä»¥ä¸‹ã®è¨˜äº‹ã‚‚ã”å‚考下ã•ã„。 Hadoopã€hBaseã§æ§‹ç¯‰ã™ã‚‹å¤§è¦æ¨¡åˆ†æ•£ãƒ‡ãƒ¼ã‚¿å‡¦ç†ã‚·ã‚¹ãƒ†ãƒ Hadoopã®ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«ã¨ã‚µãƒ³ãƒ—ルプãƒã‚°ãƒ©ãƒ ã®å®Ÿè¡Œ 複数マシンã¸Hadoopをインストールã™ã‚‹
Hadoopã€hBaseã§æ§‹ç¯‰ã™ã‚‹å¤§è¦æ¨¡åˆ†æ•£ãƒ‡ãƒ¼ã‚¿å‡¦ç†ã‚·ã‚¹ãƒ†ãƒ ：CodeZine
ã¯ã˜ã‚ã«ã€€ã“ã®é€£è¼‰ã§ã¯ã€å¤§è¦æ¨¡åˆ†æ•£è¨ˆç®—フレームワーク「Hadoopã€ã¨ã€ãã®ä¸Šã«ã¤ãられãŸå¤§è¦æ¨¡åˆ†æ•£ãƒ‡ãƒ¼ã‚¿ãƒ™ãƒ¼ã‚¹ã€ŒhBaseã€ã®ä»•çµ„ã¿ã¨ç°¡å˜ãªã‚µãƒ³ãƒ—ルアプリケーションを紹介ã—ã¾ã™ã€‚Hadoopã¨hBaseã¯ã€Googleã®åŸºç›¤ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ã®ã‚ªãƒ¼ãƒ—ンソースクãƒãƒ¼ãƒ³ã§ã™ã€‚機能やコンセプトã«ã¤ã„ã¦ã¯ã€GoogleãŒç™ºè¡¨ã—ã¦ã„ã‚‹å¦è¡“è«–æ–‡ã«ä¾ã£ã¦ã„ã¾ã™ã€‚　ã“れらã®å¦è¡“è«–æ–‡ã«ã‚ˆã‚‹ã¨ã€Googleã§ã¯å¤§è¦æ¨¡åˆ†æ•£ãƒ•ã‚¡ã‚¤ãƒ«ã‚·ã‚¹ãƒ†ãƒ 「Google File Systemã€ã€å¤§è¦æ¨¡åˆ†æ•£è¨ˆç®—フレームワーク「MapReduceã€ã€å¤§è¦æ¨¡åˆ†æ•£ãƒ‡ãƒ¼ã‚¿ãƒ™ãƒ¼ã‚¹ã€ŒBigTableã€ã€åˆ†æ•£ãƒãƒƒã‚¯ã‚µãƒ¼ãƒ“ス「Chubbyã€ã¨ã„ã†4ã¤ã®ã‚¤ãƒ³ãƒ•ãƒ©ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ãŒä½¿ã‚ã‚Œã¦ã„ã¾ã™ã€‚ 図1ã«Googleã®åŸºç›¤æŠ€è¡“é–“ã®ä¾å˜é–¢ä¿‚ã€ãã—ã¦ãã‚Œã«å¯¾å¿œã™ã‚‹OSSã®å¯¾å¿œé–¢ä¿‚を示ã—ã¾ã—ãŸã€‚ã¾ãšã¯å¯¾å¿œã™ã‚‹Googleã®åŸºç›¤æŠ€è¡“ãã‚Œãžã‚Œã®æ©Ÿèƒ½ã‚„特徴をã–ã£ãã‚Šã¨
MapReduceã¨Hadoopã®å°†æ¥ã«ã¤ã„ã¦ã€Yahooã®Doug Cuttingã«ã‚¤ãƒ³ã‚¿ãƒ“ュー
Spring Bootã«ã‚ˆã‚‹APIãƒãƒƒã‚¯ã‚¨ãƒ³ãƒ‰æ§‹ç¯‰å®Ÿè·µã‚¬ã‚¤ãƒ‰ 第2版 何åƒäººã‚‚ã®é–‹ç™ºè€…ãŒã€InfoQã®ãƒŸãƒ‹ãƒ–ック「Practical Guide to Building an API Back End with Spring Bootã€ã‹ã‚‰ã€Spring Bootを使ã£ãŸREST API構築ã®åŸºç¤Žã‚’å¦ã‚“ã 。ã“ã®æœ¬ã§ã¯ã€å‡ºç‰ˆæ™‚ã«æ–°ã—ãリリースã•ã‚ŒãŸãƒãƒ¼ã‚¸ãƒ§ãƒ³ã§ã‚ã‚‹ Spring Boot 2 を使用ã—ã¦ã„る。ã—ã‹ã—ã€Spring Boot3ãŒæœ€è¿‘リリースã•ã‚Œã€é‡è¦ãªå¤‰...
Skynet−新ã—ã„Rubyã®MapReduce
データ処ç†ã‚’分散ã•ã›ã‚‹MapReduceè¨è¨ˆãƒ‘ターン(source)ãŒ2004å¹´ã«Googleã«ã‚ˆã£ã¦å°Žå…¥ã•ã‚Œã€ãã‚Œã«ã¯C++ã®å®Ÿè£…ãŒã¤ã„ã¦ããŸã€‚今ã§ã¯ã€Adam Pisoniæ°(サイト・英語)ãŒSkynet(サイト・英語)ã¨ã„ã†å称ã§ãƒªãƒªãƒ¼ã‚¹ã—ãŸæ–°ã—ã„Rubyã§ã®å®Ÿè£…版ãŒåˆ©ç”¨å¯èƒ½ã 。 Skynetã¯é †å¿œæ€§ãŒã‚ã‚Šã€è‡ªå‹•ã‚¢ãƒƒãƒ—グレード機能付ãã§è€éšœå®³æ€§ã®å®Œå…¨åˆ†æ•£åž‹ã‚·ã‚¹ãƒ†ãƒ ã§ã€å˜ä¸€éšœå®³ç‚¹ã¯çš†ç„¡ã§ã™ã€‚ Googleã®ãƒ‡ã‚¶ã‚¤ãƒ³ãƒšãƒ¼ãƒ‘ーã¨Skynetã«ã¯è‘—ã—ãé‡è¦ãªç›¸é•ç‚¹ãŒ2ã¤ã‚る。 SkynetãŒç”Ÿã‚³ãƒ¼ãƒ‰ã‚’ワーカーã«é€ã‚Œãªã„ã“ã¨ã€‚ Skynetã¯ãƒ”ア・リカãƒãƒªã‚·ã‚¹ãƒ†ãƒ を利用ã—ã¦ãŠã‚Šã€ãƒ¯ãƒ¼ã‚«ãƒ¼ãŒãŠäº’ã„を監視ã—ã¦ã„ã‚‹ã“ã¨(サイト・英語)。 ç†ç”±ãŒä½•ã§ã‚れワーカーãŒæ•…éšœã™ã‚‹ã€ã‚ã‚‹ã„ã¯æ©Ÿèƒ½ã—ãªããªã‚‹ã¨ã€åˆ¥ã®ãƒ¯ãƒ¼ã‚«ãƒ¼ãŒæ°—付ã„ã¦ã€ãã®ã‚¿ã‚¹ã‚¯ã‚’引ã継ãŽã¾ã™ã€‚ã¾ãŸã€Skynetã«ã¯ç‰¹åˆ¥ãªã€Œãƒžã‚¹ã‚¿ãƒ¼ã€ã‚µãƒ¼ãƒã¯å˜åœ¨ã›
Google ã®å¤§è¦æ¨¡ãƒ‡ãƒ¼ã‚¿å‡¦ç†: Days on the Moon
Google ã®éµœé£¼æ–‡æ•ã•ã‚“ã«ã‚ˆã‚‹è¬›æ¼”会「大è¦æ¨¡ãƒ‡ãƒ¼ã‚¿å‡¦ç†ã‚’å¯èƒ½ã«ã™ã‚‹ Google ã®æŠ€è¡“ã€ã«è¡Œã£ã¦ãã¾ã—ãŸã€‚内容的ã«ã¯ç‘波大å¦ã§é–‹ã‹ã‚ŒãŸã‚‚ã®ã¨åŒã˜ã§ã¯ãªã„ã‹ã¨æ€ã„ã¾ã™ (「新ビジãƒã‚¹ãƒ¢ãƒ‡ãƒ«ã€ãŒãã®ã¾ã¾ã ã£ãŸã“ã¨ãªã©ã‹ã‚‰)。以下ã€ä¸Šè¨˜è¨˜äº‹ã«è¼‰ã£ã¦ã„ãªã„ã“ã¨ã‚’ä¸å¿ƒã«ãƒ¡ãƒ¢ã‹ã‚‰æŠœæ›¸ãを。 æ¤é ƒ Google ã«ã¯ã‚„る物 ç¾åœ¨ Google ã§ã¯ Google ã®ä½¿å‘½ (Google's mission is to organize the world's information and make it universally accessible and useful...) ã®æ—©æ‰“ã¡ãŒæµè¡Œä¸ã€‚鵜飼ã•ã‚“㯠50 秒程度ã€ä¸€ç•ªé€Ÿã„人㯠30 秒程度。 Google ã®æ‰±ã†æƒ…å ± Google ã®ã„ã†ã€Œæƒ…å ±ã€ã¯ã‚¤ãƒ³ã‚¿ãƒ¼ãƒãƒƒãƒˆä¸Šã®ã‚‚ã®ã ã‘ã«é™ã‚‰ãªã„ (例: Google ブック検索)。 データセンター
Hadoop
13. $ env | grep JAVA JAVA_HOME=/System/Library/Frameworks/JavaVM.framework/Versions/CurrentJDK/Home $ java -version java -versionjava version quot;1.5.0_07quot;Java(TM) 2 Runtime Environment, Standard Edition (build 1.5.0_07-154)Java HotSpot(TM) Client VM (build 1.5.0_07-87, mixed mode, sharing) $ curl -O http://www.apache.org/dist/lucene/hadoop/stable/hadoop-0.13.0.tar.gz $ tar zxvf hadoop-0.13.
並行処ç†ãƒ•ãƒ¬ãƒ¼ãƒ ワークã®JPPFã€è² è·åˆ†æ•£ã¨ãƒ•ã‚§ã‚¤ãƒ«ã‚ªãƒ¼ãƒãƒ¼ã€J2EEインテグレーションをæä¾›
Spring Bootã«ã‚ˆã‚‹APIãƒãƒƒã‚¯ã‚¨ãƒ³ãƒ‰æ§‹ç¯‰å®Ÿè·µã‚¬ã‚¤ãƒ‰ 第2版 何åƒäººã‚‚ã®é–‹ç™ºè€…ãŒã€InfoQã®ãƒŸãƒ‹ãƒ–ック「Practical Guide to Building an API Back End with Spring Bootã€ã‹ã‚‰ã€Spring Bootを使ã£ãŸREST API構築ã®åŸºç¤Žã‚’å¦ã‚“ã 。ã“ã®æœ¬ã§ã¯ã€å‡ºç‰ˆæ™‚ã«æ–°ã—ãリリースã•ã‚ŒãŸãƒãƒ¼ã‚¸ãƒ§ãƒ³ã§ã‚ã‚‹ Spring Boot 2 を使用ã—ã¦ã„る。ã—ã‹ã—ã€Spring Boot3ãŒæœ€è¿‘リリースã•ã‚Œã€é‡è¦ãªå¤‰...
Apache Hadoop
This is the first release of Apache Hadoop 3.4 line. It contains 2888 bug fixes, improvements and enhancements since 3.3. Users are encouraged to read the overview of major changes. For details of please check release notes and changelog. This is a release of Apache Hadoop 3.3 line. It contains 117 bug fixes, improvements and enhancements since 3.3.5. Users of Apache Hadoop 3.3.5 and earlier shoul
Romaã€Fairyã«ã¤ã„ã¦ã²ã¨ã“ã¨ãµãŸã“㨠- Blog by Sadayuki Furuhashi
大è¦æ¨¡åˆ†æ•£å‡¦ç†å‘ã‘ã®å›½ç”£â€œã‚¦ã‚§ãƒ–OSâ€ã‚’Rubyã§é–‹ç™ºä¸ - @ITより。 ã“ã‚Œã¯ãƒžã‚ºã‚¤ã“ã¨ã«ãªã£ãŸã€‚WikiFormeを作ã£ã¦ã„る内ã«ã€VIVER構想ã®ä¸€éƒ¨ãŒå…ˆã«å®Ÿç¾ã•ã‚Œã¦ã—ã¾ã„ãã†ã 。 以下ã€ç§ã¯ã“ã®ã‚«ãƒ³ãƒ•ã‚¡ãƒ¬ãƒ³ã‚¹ã«è¡Œã£ã¦ã‚‚ã„ã¾ã›ã‚“ã—ã€ã¨ã£ã¦ã‚‚æµ…è–„ãªé ã§æ›¸ã„ã¦ã¾ã™ã®ã§ã€ã‚ã¾ã‚Šä¿¡ç”¨ã—ã¦ã¯ã„ã‘ã¾ã›ã‚“。 ã¾ãšRomaã«ã¤ã„ã¦ã€‚ Romaã¯ã€ãƒ¡ãƒ¢ãƒªä¸Šã«ãƒ‡ãƒ¼ã‚¿ã‚’ä¿æŒã—ãŸå¤šæ•°ã®ãƒžã‚·ãƒ³ã‚’組ã¿åˆã‚ã›ã‚‹ã“ã¨ã§ã€é«˜é€Ÿã§ä¿¡é ¼æ€§ãŒé«˜ã„ストレージを実ç¾ã™ã‚‹ã“ã¨ã‚’ç‹™ã†ã€‚具体的ã«ã¯ã€å·¨å¤§ãªã‚ªãƒ³ãƒ¡ãƒ¢ãƒªã®ãƒãƒƒã‚·ãƒ¥ãƒ»ãƒ†ãƒ¼ãƒ–ルをãƒãƒƒãƒˆãƒ¯ãƒ¼ã‚¯ä¸Šã«åˆ†æ•£ã—ãŸå¤šæ•°ã®ã‚µãƒ¼ãƒä¸Šã«æ§‹ç¯‰ã™ã‚‹ã€‚P2P（peer-to-peer）ãƒãƒƒãƒˆãƒ¯ãƒ¼ã‚¯ã®ãƒ«ãƒ¼ãƒ†ã‚£ãƒ³ã‚°æŠ€è¡“ã¨ã—ã¦æ³¨ç›®ã•ã‚Œã¦ã„る分散ãƒãƒƒã‚·ãƒ¥ãƒ»ãƒ†ãƒ¼ãƒ–ル（DHT)ã¨ä¼¼ãŸå‹•ä½œãƒ¢ãƒ‡ãƒ«ã«åŸºã¥ãã¨ã„ã†ã€‚ ã©ã†ã‚„らã€ç§ãŒä½œã‚ã†ã¨ã—ã¦ã„ã¦å…¨ç„¶ã§ãã¦ãªã„分散ファイルシステムã®è€ƒãˆã¨å°‘ã—è¿‘ã„。 オンメモリã¨ã„ã†
1
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
http://www-masu.ist.osaka-u.ac.jp/~kakugawa/lecture/2006/fcs/note/slide1/index.html
TechCrunch Japanese アーカイブ � ヤフーãŒæ¤œç´¢ã«Hadoop採用ã€ã‚°ãƒ¼ã‚°ãƒ«ã£ã½ã脱皮を図る
{{#tags}}- {{label}}
{{/tags}}