データレイク関連㮠OSS - Delta Lake, Apache Hudi, Apache Kuduã¯ã˜ã‚ã«#å‰å›žã®ãƒã‚¹ãƒˆã§ã¯ãƒ‡ãƒ¼ã‚¿ãƒ¬ã‚¤ã‚¯ã¨ã¯ã©ã†ã„ã†ã‚‚ã®ã‹ã¨ã„ã†ã®ã‚’調ã¹ãŸã€‚ 今回ã¯ãƒ‡ãƒ¼ã‚¿ãƒ¬ã‚¤ã‚¯ã®æ–‡è„ˆã§ã©ã®ã‚ˆã†ãª OSS ãŒæ³¨ç›®ã•ã‚Œã¦ã„ã‚‹ã®ã‹ã‚’見ã¦ã„ããŸã„。 以下㯠NTT データã•ã‚“ã«ã‚ˆã‚‹è¬›æ¼”資料ã§ã‚ã‚Šã€ãã®ä¸ã§ã€Œè¿‘å¹´ç™»å ´ã—ã¦ããŸã€ãƒªã‚¢ãƒ«ã‚¿ã‚¤ãƒ 分æžã«åˆ©ç”¨å¯èƒ½ãªOSSストレージレイヤソフトã€ã¨ã„ã†ã®ãŒ3ã¤æŒ™ã’られã¦ã„る。 Delta LakeApache HudiApache Kuduã“れらã¯ã™ã¹ã¦è«–ç†çš„ãªã‚¹ãƒˆãƒ¬ãƒ¼ã‚¸ãƒ¬ã‚¤ãƒ¤ãƒ¼ã‚’æ‹…ã†ã€‚ ã“ã¡ã‚‰ã®è¬›æ¼”資料ã«ä»˜ã‘足ã™ã‚ˆã†ãªã“ã¨ã‚‚ãªã„ã‹ã‚‚ã—ã‚Œãªã„ãŒã€ã“ã®ãƒã‚¹ãƒˆã§ã¯ãƒ‡ãƒ¼ã‚¿ãƒ¬ã‚¤ã‚¯ã¨ã„ã†æ–‡è„ˆã‹ã‚‰è‡ªåˆ†ã§èª¿ã¹ã¦ç†è§£ã—ãŸå†…容をã¾ã¨ã‚ã‚‹ã¨ã„ã†ã“ã¨ã‚’目的ã«ã™ã‚‹ã€‚ 当然 Hadoop, Hive, Spark ç‰ã‚‚データレイクã®æ–‡è„ˆã«ãŠã„ã¦è¶…é‡è¦ã ãŒã€ã€Œãƒ‡ãƒ¼ã‚¿ãƒ¬ã‚¤ã‚¯ã€ã¨ã„ã†è¨€è‘‰ãŒã‚ˆãèžã‹ã‚Œã‚‹ã‚ˆã†ã«ãªã‚‹å‰ã‹ã‚‰æ™®åŠã—ã¦ã„ãŸã®ã§ã“ã®ãƒã‚¹ãƒˆã§ã¯è§¦ã‚Œãªã„ã“ã¨ã«ã™ã‚‹ã€‚ Del
Apache Iceberg ã¨ã¯ä½•ã‹ - æµæ²™æ²³éŽ®
{{#tags}}- {{label}}
{{/tags}}