データ分æžç’°å¢ƒã«ã¤ã„ã¦æ›¸ã„ã¦ã¿ã‚‹ - wyukawa's diaryãƒã‚°ã‚’HDFSã«é›†ã‚ã¦Hiveã§ETLや集計を行ã„集計çµæžœã‚’RDBMSã«è“„ç©ã—ã¦ãƒ¬ãƒãƒ¼ãƒ†ã‚£ãƒ³ã‚°ãƒ„ールã§å¯è¦–化ã™ã‚‹ã¨ã„ã†ã®ã¯ä¸€èˆ¬çš„ãªè©±ã ã¨æ€ã„ã¾ã™ã€‚ データã®æµã‚Œã§ã„ã†ã¨ App -> HDFS -> RDBMS -> レãƒãƒ¼ãƒ†ã‚£ãƒ³ã‚°ãƒ„ール ã¨ã„ã†æ„Ÿã˜ã§ã™ã€‚ ä»–ã«ã‚‚Prestoã®ã‚ˆã†ãªlow latencyãªãƒ„ールãŒåŠ ã‚ã‚‹ã“ã¨ãŒã‚ã‚‹ã¨æ€ã„ã¾ã™ã€‚ã“れらã®ãƒ„ールをã©ã†çµ„ã¿åˆã‚ã›ã¦ã©ã†ETLã‚’ã¾ã‚ã—ã¦ã„ãã®ãŒã„ã„ã®ã‹ã¤ã‚‰ã¤ã‚‰ã¨æœ€è¿‘考ãˆã¦ãŠã‚Šã¾ã™ã€‚ 僕ãŒçµŒé¨“ã—ãŸã®ã¯Pythonã§ETL処ç†ã‚’書ã„ã¦ï¼ˆå†…部的ã«ã¯hiveserverã«hiveクエリを投ã’ãŸã‚Šã€MySQLã«é›†è¨ˆçµæžœã‚’ä¿å˜ã—ãŸã‚Šï¼‰ã€ã‚¹ã‚±ã‚¸ãƒ¥ãƒ¼ãƒªãƒ³ã‚°ã¯cron, Azkabanã§ã€é›†è¨ˆçµæžœã¯MySQLã§ãƒ¬ãƒãƒ¼ãƒ†ã‚£ãƒ³ã‚°ãƒ„ールã¯è‡ªä½œã§ã¨ã„ã†ã‚‚ã®ã§ã™ã€‚adhocãªãƒ‡ãƒ¼ã‚¿åˆ†æžã¯shib使ã„ã¾ã™ã€‚ã¾ã‚ã“ã‚Œã§ã‚‚å分é‹ç”¨å›žã£ã¦ã‚‹ã‚“ã ã‘ã©ã€ä»–ã«ã‚‚良ã„方法ãŒç„¡
SPDY ã¨ã‹æ–°ã—ã„プãƒãƒˆã‚³ãƒ«ãŒã‚ˆãã‚ã‹ã‚‰ãªã„ã®ã§ç°¡å˜ã«ã¾ã¨ã‚㟠| tech | http - 氾濫原
æš—å·é€šè²¨(Bitcoin, Monacoin)ã®ãƒ—ãƒãƒˆã‚³ãƒ«ã‚’ç†è§£ã™ã‚‹: 公開éµã¨ç§˜å¯†éµ - Qiita
人間ã¨ã‚¦ã‚§ãƒ–ã®æœªæ¥ - mod_mrubyã¨ngx_mrubyã®v1.0.0をリリースã—ã¾ã—ãŸï¼‹æŒ¯ã‚Šè¿”ã‚Šã¾ã¨ã‚
{{#tags}}- {{label}}
{{/tags}}