モンスターストライクを支ãˆã‚‹ãƒ‡ãƒ¼ã‚¿åˆ†æžåŸºç›¤ã¨æº–リアルタイム集計
ã¯ã˜ã‚ã¦ã®Spark SQLï¼Amazon EMRを使ã£ã¦10分ã§è©¦ã—ã¦ã¿ã‚‹ | DevelopersIO
ã¯ã˜ã‚ã« Spark SQLã«è§¦ã£ã¦ã¿ãŸã®ã§æ‰‹é †ãªã©ã‚’ã¾ã¨ã‚ã¾ã—ãŸã€‚Spark SQLã¨ã„ã†ã®ã¯ Apache Hiveã®ã‚ˆã†ã«ã‚¯ã‚¨ãƒªå®Ÿè¡Œã™ã‚‹ã“ã¨ã§åˆ†æ•£å‡¦ç†ãŒã§ãã‚‹ã‚‚ã®ã§ã™ã€‚Hiveã¨ã®é•ã„ã¯ã‚¤ãƒ³ãƒ¡ãƒ¢ãƒªã§ã‚ã‚‹ãŸã‚ã«é«˜é€Ÿã«å‡¦ç†ã§ãã‚‹ã“ã¨ã¨ã‚¯ã‚¨ãƒªè¨€èªžã«SQLãŒä½¿ãˆã‚‹ã“ã¨ã§ã™ã€‚10分ä½ã§è©¦ã›ã‚‹ã¨æ€ã„ã¾ã™ã®ã§Sparkã‚„EMRã«è§¦ã£ãŸã“ã¨ãŒãªã„æ–¹ã¯ãœã²ã‚„ã£ã¦ã¿ã¦ãã ã•ã„。 1.EC2ã®ã‚ーペアを用æ„ã™ã‚‹ EC2インスタンスã«SSHã§æŽ¥ç¶šã™ã‚‹ã®ã§ã‚ーペアãŒãªã„å ´åˆã¯ä½œæˆã™ã‚‹å¿…è¦ãŒã‚ã‚Šã¾ã™ã€‚以下ã®AWSã®ã‚µã‚¤ãƒˆã‚’見ã¦ä½œã£ã¦ãã ã•ã„。 ã‚ーペアãŒã™ã§ã«ã‚ã‚‹æ–¹ã¯ã‚¹ã‚ップã—ã¦ã‚‚らã£ã¦çµæ§‹ã§ã™ã€‚ Amazon EC2 ã®ã‚ーペア - Amazon Elastic Compute Cloud 2.サンプルã®ãƒ•ã‚¡ã‚¤ãƒ«ã‚’用æ„ã™ã‚‹ 今回ã¯ç§ãŒè¶£å‘³ã§ã‚„ã£ã¦ã„ã‚‹ãƒã‚±ãƒ¢ãƒ³GOã§æ•ã¾ãˆãŸãƒã‚±ãƒ¢ãƒ³ã®åå‰ã€CPã€ã‚¿ã‚¤ãƒ—æƒ…å ±ãŒå…¥ã£
1
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
処ç†ã‚’実行ä¸ã§ã™
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
{{#tags}}- {{label}}
{{/tags}}