AWS Glueを用ã„ãŸãƒ‡ãƒ¼ã‚¿åˆ†æžåŸºç›¤ã‚’構築ã—ãŸâœ¨ - Studyplus Engineering Blogã“ã‚“ã«ã¡ã¯ã€‚æ¥å‹™å§”託ã®@morix1500ã¨ç”³ã—ã¾ã™ã€‚ ã“ã®åº¦ã€ã‚¹ã‚¿ãƒ‡ã‚£ãƒ—ラス様ã‹ã‚‰ãƒ‡ãƒ¼ã‚¿åˆ†æžåŸºç›¤ã®æ§‹ç¯‰ã®æ¥å‹™å§”託をå—ã‘ã€AWSã®ãƒžãƒãƒ¼ã‚¸ãƒ‰ã‚µãƒ¼ãƒ“スを用ã„ã¦æ§‹ç¯‰ã‚’è¡Œã„ã¾ã—ãŸã€‚ ãã®éš›ã«å¾—られãŸçŸ¥è¦‹ã‚’共有ã—ãŸã„ã¨æ€ã„ã¾ã™ã€‚ データ分æžåŸºç›¤ã«ã¤ã„㦠今回スタディプラス様ã‹ã‚‰å—ã‘ãŸãƒ‡ãƒ¼ã‚¿åˆ†æžåŸºç›¤ã®è¦ä»¶ã¯ä»¥ä¸‹ã®ã‚ˆã†ãªã‚‚ã®ã§ã—ãŸã€‚ S3ã«ã‚ã‚‹ãƒã‚°ã‚’AWS Athenaã‹ã‚‰é–²è¦§ã§ãるよã†ã«ã—ã¦ã»ã—ã„ S3ã«ã‚ã‚‹JSONå½¢å¼ã®ãƒã‚°ã‚’列指å‘åž‹ã®ãƒ•ã‚©ãƒ¼ãƒžãƒƒãƒˆ(Parquet)ã«å¤‰æ›ã—ã¦ã»ã—ã„ ãƒã‚°ã¯é †æ¬¡å–ã‚Šè¾¼ã¿ï¼ˆæ¯Žæœã€æ˜¨æ—¥åˆ†ã®ãƒã‚°ãŒè¦‹ã‚Œã‚‹ã‚ˆã†ã«ã™ã‚‹ï¼‰ ã™ã§ã«ãƒã‚°ã¯S3ã«ã‚ã£ãŸã®ã§ãƒã‚°åŽé›†ã¯çµ‚ã‚ã£ã¦ã„ã¾ã™ã€‚ データ分æžåŸºç›¤ã®æ§‹æˆ 今回作æˆã—ãŸãƒ‡ãƒ¼ã‚¿åˆ†æžåŸºç›¤ã¯AWSã®ãƒžãƒãƒ¼ã‚¸ãƒ‰ã‚µãƒ¼ãƒ“スã§å®Œçµã—ã¦ã¾ã™ã€‚ 今回構築ã—ãŸã®ã¯Glueã®éƒ¨åˆ†ã§ã™ã€‚ Glueã®æ§‹æˆã‚„åˆæœŸæ§‹ç¯‰ã®æ‰‹é †ã¯ä»¥ä¸‹ã®ãƒ‰ã‚ュメント通りã§ã™ã€‚ https
{{#tags}}- {{label}}
{{/tags}}