Snowflake ã¸ã® ELT ワークフãƒãƒ¼ã‚’ AWS Step Functions ã§å®Ÿè£…ã—ã¦ã¿ãŸã“ã‚“ã«ã¡ã¯ï¼ã‚·ãƒ³ãƒ—ルフォームã®å±±å²¸ã§ã™ã€‚ 皆ã•ã‚“ã€ETL / ELT ã®ãƒ¯ãƒ¼ã‚¯ãƒ•ãƒãƒ¼ã‚¨ãƒ³ã‚¸ãƒ³ã«ã¯ä½•ã‚’利用ã•ã‚Œã¦ã„ã‚‹ã§ã—ょã†ã‹ï¼Ÿ Apache Airflow ã‚„ã€ãã® AWS マãƒãƒ¼ã‚¸ãƒ‰ã‚µãƒ¼ãƒ“スã§ã‚ã‚‹ Amazon MWAA を利用ã•ã‚Œã¦ã„る方も多ã„ã‹ã¨æ€ã„ã¾ã™ã€‚ã‚‚ã—ã㯠TROCCO ã‚„ Fivetran ã®ã‚ˆã†ãªãƒžãƒãƒ¼ã‚¸ãƒ‰ãªãƒ¯ãƒ¼ã‚¯ãƒ•ãƒãƒ¼ãƒ„ールを利用ã•ã‚Œã¦ã„ã‚‹ã‹ã‚‚ã—ã‚Œã¾ã›ã‚“。 当社ã§ã¯å¤šãã®ãƒ¯ãƒ¼ã‚¯ãƒ•ãƒãƒ¼ã§ AWS Step Functions (SFN) を利用ã—ã¦ã„ã¾ã™ã€‚今回ã€Snowflake ã¸ã® ELT ワークフãƒãƒ¼ã‚’ SFN ã§å®Ÿè£…ã—ã¦ã¿ãŸã®ã§ã€æœ¬è¨˜äº‹ã§ã¯ãã®å†…容ã«ã¤ã„ã¦ã”紹介ã§ãã‚Œã°ã¨æ€ã„ã¾ã™ã€‚ 背景・課題感 背景 å°‘ã—å‰ã«ã€ã€ŒSnowflake × dbt ã§æ§‹ç¯‰ã™ã‚‹ ELT アーã‚テクãƒãƒ£ã€ã¨ã„ã†ã‚¿ã‚¤ãƒˆãƒ«ã®è¨˜äº‹ã‚’投稿ã—ã¾ã—ãŸã€‚詳細ãªèª¬æ˜Žã¯ãã¡ã‚‰ã«è²ã‚Šã¾ã™ãŒã€AWS 環境ã‹
{{#tags}}- {{label}}
{{/tags}}