Embulkã‚’Fargateã®ã‚¿ã‚¹ã‚¯ã‚¹ã‚±ã‚¸ãƒ¥ãƒ¼ãƒªãƒ³ã‚°ã§å®šæœŸçš„ã«å®Ÿè¡Œã—ã¦MySQLã‹ã‚‰S3ã¸ãƒ•ã‚¡ã‚¤ãƒ«ã‚’出力ã™ã‚‹ã‚³ãƒ³ãƒ†ãƒŠä½œã£ãŸ - Qiitaä¿®æ£ä¸ã€‚ã§ã™ã¾ã™èª¿ãŒãŠã‹ã—ã‹ã£ãŸã‚Šã—ã¾ã™ã€‚ æ§‹æˆ RDS → Fargate(embulk) → S3 メリット å‹•çš„ãªè¨å®šã¯ã™ã¹ã¦Fargateã®ç’°å¢ƒå¤‰æ•°ã‹ã‚‰å–å¾—ã™ã‚‹ã®ã§ã€ç•°ãªã‚‹ã‚¯ã‚¨ãƒªã§ç•°ãªã‚‹ãƒ•ã‚¡ã‚¤ãƒ«ã«å‡ºåŠ›ã—ãŸã„ã¨ã„ã£ãŸå ´åˆã§ã‚‚ã€Dockerをビルドã—ç›´ã™ã“ã¨ãªãã€AWSã®ã‚³ãƒ³ã‚½ãƒ¼ãƒ«ã‹ã‚‰Fargateã®æ–°ã—ã„タスクを作æˆã™ã‚‹ã ã‘ã§ã€å®Ÿç¾å¯èƒ½ã§ã™ã€‚ デメリット Lambdaã§ã‚‚ãã†ã§ã™ãŒã€Fargateもサーãƒãƒ¬ã‚¹ãªã—ãã¿ãªã®ã§ã€åŒæ™‚実行数ãŒå¢—ãˆã‚‹ã¨ã€DBè² è·ã¯ä¸ŠãŒã‚Šã¾ã™ã€‚ çŸã„é–“éš”ã§ãƒ•ã‚¡ã‚¤ãƒ«å‡ºåŠ›ã™ã‚‹ã‚¿ã‚¹ã‚¯ã‚’複数並列ã§è¨å®šã—ãŸã‚‰ã€DBè² è·ã‚’æ°—ã«ã—ã¦ã‚ã’ã¦ãã ã•ã„。 モãƒãƒ™ãƒ¼ã‚·ãƒ§ãƒ³ RDS(Amazon Aurora≒MySQL) ã‹ã‚‰S3ã«csvを出力ã™ã‚‹è¦ä»¶ãŒã‚ã£ãŸã‘ã©ã€ ・開発ã¯ã—ãŸããªã„ ・ãƒãƒƒãƒã‚µãƒ¼ãƒã«embulk入れãŸããªã„ ・DataPipeline ã¨ã‹Glueを使ã†ã»ã©ã§ã‚‚
AWS Batchを検討ã—ãŸã‘ã©AWS Fargateを採用ã—ãŸè©± | QUARTETCOM TECH BLOG
{{#tags}}- {{label}}
{{/tags}}