BigQueryã«Twitterã®ã‚¿ã‚¤ãƒ ラインを入れる [Ruby]Twitter ã®ã‚¿ã‚¤ãƒ ラインをä¿å˜ã—ã¦ãŠãã¨ãªã«ã‹ã¨ä¾¿åˆ©ãªã®ã§ã€è‰²ã€…ã¨ä¿å˜å½¢å¼ã‚’変ãˆãªãŒã‚‰ 4 å¹´ãらã„記録ã—続ã‘ã¦ã„る。ツイートã®ä¿å˜ãŒä¾¿åˆ©ã™ãŽã‚‹ã®ã§ã€ãƒ„イセーブã¨ã„ã†ã‚µãƒ¼ãƒ“ス化ã¾ã§ã—ãŸã€‚ã‹ã¤ã¦ã¯ãƒ†ã‚ストã§ã€MongoDB ã‚„ MySQL ã¨ã‹ Groonga ã¨ã‹ã„ã‚ã„ã‚ã‚„ã£ã¦ããŸã€‚ã©ã‚Œã‚‚å•é¡Œãªã„ã‚“ã ã‘ã©ã€å¢—ãˆç¶šã‘ã‚‹ãƒã‚°ãƒ‡ãƒ¼ã‚¿ã‚’ä¿å˜ã™ã‚‹å ´æ‰€ã¨ã—ã¦è€ƒãˆã‚‹ã¨ BigQuery ãŒç¾ä»£ã«ãƒžãƒƒãƒã—ã¦ã‚‹ã‚ˆã†ãªã®ã§ãã¡ã‚‰ã«ç§»è¡Œã—ãŸã€‚ BigQuery ã« TL ã‚’ä¿å˜ã™ã‚‹ã¨ã§ãã‚‹ã“㨠TL ã®å…¨ã¦ã®ãƒ‡ãƒ¼ã‚¿ã‚’フルスã‚ャンã§ãる。ã“ã‚Œã¯ã‹ãªã‚Šä¾¿åˆ©ã§ã€ä»Šå›žã“ã®ãƒ–ãƒã‚°è¨˜äº‹ã‚’書ãã«ã‚ãŸã£ã¦ã‚‚ ‘BigQuery’ ã‚’ TL ã‹ã‚‰æ¤œç´¢ã™ã‚Œã°ã€ä¿¡é ¼ã§ãるフォãƒãƒ¼ã‚¤ãƒ³ã‚°ã®äººã€…ã®å£°ã‚’見るã“ã¨ãŒã§ããŸã€‚ã“ã‚Œã«ã‚ˆã‚Šã€ŒæŸ CA 社ã§ã¯ 5000 å°ã® MongoDB クラスタ㧠BigQuery ã«å¯¾æŠ—ã—ã¦ã„ã‚‹ã€ã¨ã„ã†
![BigQueryã«Twitterã®ã‚¿ã‚¤ãƒ ラインを入れる [Ruby]](https://cdn-ak-scissors.b.st-hatena.com/image/square/eb99bf7e3074ef0fe5df0ca25a644e696c62ad78/height=288;version=1;width=512/https%3A%2F%2Fs3-ap-northeast-1.amazonaws.com%2Fkksg%2Fblog%2F53b4ac19c38aa5513f47ea75.png)
{{#tags}}- {{label}}
{{/tags}}