Airflowã¨Dockerã§ä¿ºã€…データ分æžåŸºç›¤ã‚’ã¤ãã£ã¦ã¿ãŸ&Imageを公開ã—ã¦ã¿ãŸ #kwskrb - Lean Baseballライフワーク（＆将æ¥ã®ä»•äº‹ï¼‰ã¨ã—ã¦ã„る野çƒãƒ‡ãƒ¼ã‚¿åˆ†æžã®åŸºç›¤ã‚’Airflow + Dockerä»–ã§ä½œã‚Šã¾ã—ãŸ. ã“ã®ãƒãƒŠã‚·ã¯kawasaki.rb #051 5å¹´ç›®çªå…¥LT大会ã§æŠ«éœ²ã—ãŸLTã®ç¶šãã§ã‚ã‚Š, PyConJP 2017ã®ãƒˆãƒ¼ã‚¯ãƒã‚¿ã€Œé‡Žçƒã‚’科å¦ã™ã‚‹æŠ€è¡“〜Pythonを用ã„ãŸçµ±è¨ˆãƒ©ã‚¤ãƒ–ラリ作æˆã¨åˆ†æžåŸºç›¤æ§‹ç¯‰ã€ã®ãƒ¡ã‚¤ãƒ³ãƒ†ãƒ¼ãƒžã€Œåˆ†æžåŸºç›¤æ§‹ç¯‰ã€ã®ä¸»è»¸ã¨ãªã‚‹ãƒãƒŠã‚·ã§ã‚‚ã‚ã‚Šã¾ã™. è¦ç´„ã™ã‚‹ã¨ データ集ã‚→å‰å‡¦ç†â†’データベース化ã®æµã‚Œã¯Airflowを使ã†ã¨ã„ã„æ„Ÿã˜ã«å®Ÿç¾ã§ãã‚‹. Airflowã¯é«˜æ©Ÿèƒ½ã ãŒå°Žå…¥ã¨é‹ç”¨ã«ä¸€æ‰‹é–“ã‹ã‹ã‚‹â†’å›°ã£ãŸâ†’ãã†ã ï¼Docker Imageã«ã—ã¡ã‚ƒãˆï¼â†’楽ã«ãªã£ãŸãžï¼ ãã‚“ãªAirflowã®Docker Imageã¨ã‚³ãƒ¼ãƒ‰ã‚’公開ã—ãŸã®ã§æ°—ã«ãªã‚‹æ–¹ã¯ãœã²ä½¿ã£ã¦ã»ã—ã„&PRã¨ã‹ã„ãŸã ã‘ã‚‹ã¨ã†ã‚Œã—ã„ã§ã™. ã“ã®ã‚¨ãƒ³ãƒˆãƒªãƒ¼ã®å¯¾è±¡èªè€… データを集ã‚ã¦åˆ†æžã™ã‚‹ãŠä»•äº‹ãƒ»è¶£å‘³ã‚’ã—
「人ã¨Webã«å„ªã—ã„ã€Scrapyã®ä½¿ã„方サンプル〜 #PyConJP 2017ã®ã¤ã¥ã(ãªãŠé‡Žçƒ) - Lean Baseball
{{#tags}}- {{label}}
{{/tags}}