一休ã®ETL処ç†ã‚’Airflowã§å†æ§‹ç¯‰ã—ã¾ã—㟠- 一休.com Developers Blog一休ã®ãƒ‡ãƒ¼ã‚¿ã‚µã‚¤ã‚¨ãƒ³ã‚¹éƒ¨ã«æ‰€å±žã—ã¦ã„ã¾ã™å°å³¶ã§ã™ã€‚ 以å‰ãƒ‡ãƒ¼ã‚¿åˆ†æžåŸºç›¤ã®æ§‹ç¯‰ã§è¨˜äº‹ã‚’上ã’ã¦ã„ã¾ã—ãŸãŒã€ä»Šå›žã¯ETL*1周りã®è©±ã‚’ã—よã†ã¨æ€ã„ã¾ã™ã€‚ user-first.ikyu.co.jp 今回ETLã®ãƒ„ールã¨ã—ã¦å°Žå…¥ã—ãŸã®ã¯Airflowã¨ã„ã†ãƒ„ールã§ã™ã€‚ 2017å¹´ã®ã‚¢ãƒ‰ãƒ™ãƒ³ãƒˆã‚«ãƒ¬ãƒ³ãƒ€ãƒ¼ã§ã‚‚紹介ã•ã›ã¦ã„ãŸã ãã¾ã—ãŸã€‚ 一休ã®ãƒ‡ãƒ¼ã‚¿ãƒ•ãƒãƒ¼ã‚’Airflowを使ã£ã¦å®Ÿè¡Œã—ã¦ã¿ã‚‹ 一休ã®ETLã®ç¾çŠ¶ã«ã¤ã„㦠一休ã®ETL周りã¯ä»¥ä¸‹ã®ç”»åƒã®ã‚ˆã†ã«ãªã£ã¦ã„ã¾ã—ãŸã€‚ 課題 ETLã®å‡¦ç†æ™‚é–“ãŒä¼¸ã³ãŸï¼ˆå‡ºç¤¾å¾Œã‚‚処ç†ãŒç¶šã„ã¦ã„ãŸï¼‰ エラーã®ãƒªã‚«ãƒãƒªä½œæ¥ã«æ™‚é–“ãŒã‹ã‹ã‚‹ï¼ˆãƒã‚°ãŒç¢ºèªã—ã«ãã„, サーãƒãƒ¼ã«å…¥ã£ã¦ä½œæ¥ã—ãªã‘ã‚Œã°ã„ã‘ãªã„） 複雑ãªä¾å˜é–¢ä¿‚ã®å®šç¾©ãŒã—ã«ãã„（ã©ã‚Œã¨ã©ã‚ŒãŒä¾å˜ã—ã¦ã„ã‚‹ã‹ã‚ã‹ã‚‰ãªã„） ãƒªã‚½ãƒ¼ã‚¹è² è·ï¼ˆå…¨ã¦ä¸¦åˆ—ã§å®Ÿè¡Œã—ã¦ã„ãŸï¼‰ 処ç†æ¯Žã®ãƒœãƒˆãƒ«ãƒãƒƒã‚¯ãŒæŠŠæ¡ã§ããªã„ ツールã®å•é¡Œã¨ã„ã†ã‚ˆã‚Šã¯æ£ã—
{{#tags}}- {{label}}
{{/tags}}