AWS Lambda(Python3)ã§Selenium + Chrome Headless + ã§webスクレイピングã™ã‚‹ - ヤマムギAWS Lambda(Python3)ã§Selenium + Chrome Headless + ã§webスクレイピングã™ã‚‹ インターãƒãƒƒãƒˆä¸Šã«å…¬é–‹ã•ã‚Œã¦ã„ã‚‹æƒ…å ±ã‚’DynamoDBã«ã¤ã£ã“ã¿ãŸã„ã ã‘ãªã®ã§ã€VPC内ã®Lambdaã‹ã‚‰VPN経由ã§ä¼šç¤¾ã®ã‚·ã‚¹ãƒ†ãƒ ã®APIやデータベースã¨ã‚„ã‚Šã¨ã‚Šã™ã‚‹ã‚ˆã‚Šã‚‚ã€VPC外ã®Lambdaã‹ã‚‰webスクレイピングをã—ã¦ã—ã¾ã£ãŸã»ã†ãŒã¦ã£ã¨ã‚Šæ—©ã„ã‹ãªã¨ã€‚ 以å‰ã¾ã§ã¯PhantomJSを使ã£ã¦ã¾ã—ãŸãŒã©ã†ã‚„ら開発ãŒæ¢ã¾ã‚‹ã‚‰ã—ã„ã®ã§ã€ä»Šå›žã‹ã‚‰Chrome Headlessを使ã£ã¦ã¿ã‚ˆã†ã¨ã„ã†ã“ã¨ã§å°‘ã—エラーãŒå‡ºãŸã‚Šã—ãŸã®ã§å‚™å¿˜éŒ²ã¨ã—ã¦æ›¸ã„ã¦ãŠãã¾ã™ã€‚
Seleniumã‹ã‚‰Stableã«ãªã£ãŸHeadless Chrome/Firefoxを使ã£ã¦ã¿ã‚‹ - Qiita
Python: Selenium + Headless Chrome 㧠Web ページ全体ã®ã‚¹ã‚¯ãƒªãƒ¼ãƒ³ã‚·ãƒ§ãƒƒãƒˆã‚’撮る - CUBE SUGAR CONTAINER
{{#tags}}- {{label}}
{{/tags}}