大è¦æ¨¡ãƒ‡ãƒ¼ã‚¿æ´»ç”¨å‘ã‘ストレージレイヤソフトã®ã“ã‚Œã¾ã§ã¨ã“ã‚Œã‹ã‚‰ï¼ˆNTTデータ テクノãƒã‚¸ãƒ¼ã‚«ãƒ³ãƒ•ã‚¡ãƒ¬ãƒ³ã‚¹ 2019 講演資料ã€2019/09/05）
1. © 2019 NTT DATA Corporation 1 © 2019 NTT DATA Corporation NTTデータ テクノãƒã‚¸ãƒ¼ã‚«ãƒ³ãƒ•ã‚¡ãƒ¬ãƒ³ã‚¹ 2019 大è¦æ¨¡ãƒ‡ãƒ¼ã‚¿æ´»ç”¨å‘ã‘ストレージレイヤソフト㮠ã“ã‚Œã¾ã§ã¨ã“ã‚Œã‹ã‚‰ 2019å¹´9月5æ—¥ æ ªå¼ä¼šç¤¾NTTデータ システム技術本部 å‰ç”° 耕陽 ç¦ä¹… ç¢ä¹Ÿ 2. © 2019 NTT DATA Corporation 2 ※Deepãªè©±é¡Œã«èˆˆå‘³ãŒã‚ã‚‹æ–¹ã¯å½“ãƒãƒ¼ãƒ メンãƒã«ã‚ˆã‚‹éŽåŽ»ã®ã‚«ãƒ³ãƒ•ã‚¡ãƒ¬ãƒ³ã‚¹ã§ã®ç™ºè¡¨è³‡æ–™ã‚‚ã”å‚ç…§ãã ã•ã„。 ( ã§æ¤œç´¢) 本セッションã§ãŠä¼ãˆã—ãŸã„ã“㨠Hadoop誕生(2006å¹´ã”ã‚)ã‹ã‚‰ã®ã‚¹ãƒˆãƒ¬ãƒ¼ã‚¸ç³»OSSã‚’ä¸å¿ƒã¨ ã—ãŸæŠ€è¡“ã®ç™ºå±•ã¨ã€æ®‹å˜ã™ã‚‹æŠ€è¡“課題ã«å¯¾ã™ã‚‹è¿‘年出ç¾ã—㦠ããŸãƒ—ãƒãƒ€ã‚¯ãƒˆã®ã‚¢ãƒ—ãƒãƒ¼ãƒã‚’若干寄りé“ã—ãªãŒã‚‰ç´¹ä»‹ã—ã¾ã™ã€‚ • ãŠè©±ã—ã—ãªã„内容 • 個別ã®æŠ€è¡“/ミドルウェアã®â€Deepãªâ€è©±é¡Œ(※)
Apache Kuduã®ã‚·ã‚¹ãƒ†ãƒ 構æˆã¨å†…部アーã‚テクãƒãƒ£
Kuduã¯åˆ†æ•£ãƒ‡ãƒ¼ã‚¿ã‚¹ãƒˆã‚¢ã§ã‚ã‚Šã€è¤‡æ•°å°ã®ãƒžã‚·ãƒ³ã§ã‚¯ãƒ©ã‚¹ã‚¿ã‚’構æˆã™ã‚‹ã“ã¨ã§ã€é«˜æ€§èƒ½ãƒ»å¤§å®¹é‡ãƒ»é«˜å¯ç”¨æ€§ã®ã‚·ã‚¹ãƒ†ãƒ を構築ã§ãã¾ã™ã€‚図1ã«Kuduã®ã‚·ã‚¹ãƒ†ãƒ 構æˆã‚’示ã—ã¾ã™ã€‚ Kuduã®ã‚¯ãƒ©ã‚¹ã‚¿ã¯ãƒžã‚¹ã‚¿ãƒŽãƒ¼ãƒ‰ã«é…ç½®ã™ã‚‹Kudu Master（以下ã€Master）ã¨ã€ãƒ¯ãƒ¼ã‚«ãƒŽãƒ¼ãƒ‰ã«é…ç½®ã™ã‚‹Kudu TabletServer（以下ã€TServer）ã§æ§‹æˆã—ã¾ã™ã€‚Masterã¯ãƒ¡ã‚¿ãƒ‡ãƒ¼ã‚¿ï¼ˆãƒ†ãƒ¼ãƒ–ルã®æ§‹æˆæƒ…å ±ãªã©ï¼‰ã®ç®¡ç†ã‚„TServerã®æ»æ´»ç›£è¦–ã€ãŠã‚ˆã³ãƒ‡ãƒ¼ã‚¿ã®è¤‡è£½ç®¡ç†ã‚’è¡Œã„ã¾ã™ã€‚ワーカノードã®TServerã¯ãƒ†ãƒ¼ãƒ–ルã®å®Ÿãƒ‡ãƒ¼ã‚¿ã‚’管ç†ã—ã¾ã™ã€‚Kuduã®ãƒ†ãƒ¼ãƒ–ルã«ã‚¢ã‚¯ã‚»ã‚¹ã™ã‚‹Clientã¯Masterã‹ã‚‰ãƒ†ãƒ¼ãƒ–ルã®æ§‹æˆæƒ…å ±ã‚’å–å¾—ã—ã¦ã€ãれを元ã«ç›®çš„ã®ãƒ‡ãƒ¼ã‚¿ã‚’æŒã£ã¦ã„ã‚‹TServerã«ã‚¢ã‚¯ã‚»ã‚¹ã—ã¾ã™ã€‚ Kuduã¯ãƒŽãƒ¼ãƒ‰éšœå®³ã«ã‚ˆã‚‹å‹•ä½œåœæ¢ã‚„データãƒã‚¹ãƒˆã‚’é¿ã‘ã‚‹ãŸã‚ã€Master/TServerã¨ã‚‚ã«æœ€ä½Žã§ã‚‚3å°
Apache Kuduã®ãƒªãƒ¼ãƒ‰ã¨ãƒ©ã‚¤ãƒˆã®æµã‚Œ
原文：Apache Kudu Read & Write Paths 原著者：James Kinley, David Alves 翻訳：ä½è—¤ 貴彦 分æžç³»ã¨æ¥å‹™ç³»ã®ã‚¢ã‚¯ã‚»ã‚¹ãƒ‘ターンã¯å¤§ããç•°ãªã£ã¦ãŠã‚Šã€ã“ã‚Œã¾ã§ã®Hadoopエコシステムã«ã¯ä¸¡æ–¹ã«å¯¾å¿œã§ãã‚‹å˜ä¸€ã®ã‚¹ãƒˆãƒ¬ãƒ¼ã‚¸ã‚¨ãƒ³ã‚¸ãƒ³ãŒã‚ã‚Šã¾ã›ã‚“ã§ã—ãŸã€‚çµæžœã€ãã®ä¸¡æ–¹ã«å¯¾å¿œã§ãる機能をæä¾›ã™ã‚‹ãŸã‚ã«ã€ã‚¨ãƒ³ã‚¸ãƒ‹ã‚¢ã¯è¤‡æ•°ã®ã‚·ã‚¹ãƒ†ãƒ ã‚’ã¤ãªãŽåˆã‚ã›ã¦ã€è¤‡é›‘ãªã‚¢ãƒ¼ã‚テクãƒãƒ£ã‚’実装ã—ãªã‘ã‚Œã°ãªã‚Šã¾ã›ã‚“ã§ã—ãŸã€‚一方ã§ã€HDFS上ã®æ›´æ–°ä¸å¯ï¼ˆimmutable）ãªãƒ‡ãƒ¼ã‚¿ã¯å„ªã‚ŒãŸåˆ†æžãƒ‘フォーマンスをæä¾›ã—ã€Apache HBaseã®æ›´æ–°å¯èƒ½ï¼ˆmutable）ãªãƒ‡ãƒ¼ã‚¿ã¯æ¥å‹™ç³»ã®ãƒ¯ãƒ¼ã‚¯ãƒãƒ¼ãƒ‰ã«æœ€é©ã§ã™ã€‚Apache Kuduã¯ã“ã®ã‚®ãƒ£ãƒƒãƒ—ã«æ©‹æ¸¡ã—ã‚’ã™ã‚‹ã‚‚ã®ã§ã™ã€‚ Kuduã®ã‚¢ãƒ¼ã‚テクãƒãƒ£ãƒ¼ã¯ã€éžå¸¸ã«å„ªã‚ŒãŸåˆ†æžæ€§èƒ½ã‚’æä¾›ã§ãã€ãã‚Œã¨åŒæ™‚ã«è£ã§æŒ¿å…¥ã‚„æ›´æ–°ã‹ã‚‰ãªã‚‹é€£ç¶šå‡¦ç†ã‚’
1
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
Building Near Real-time Big Data Lake: Part 2
{{#tags}}- {{label}}
{{/tags}}