Treasure Dataã®è§£æžãƒ—ラットフォームを使ã£ã¦ã¿ãŸ - mikedaã®æ—¥è¨˜ãƒã‚°ã®è§£æžã¯æ—¥æ™‚ã§scpã§ã‹ã集ã‚ã¦ãƒãƒƒãƒé›†è¨ˆã—ã¦ã‚‹ã‚“ã ã‘㩠リアルタイムã§é›†è¨ˆã—ãŸã„ ã‚‚ã£ã¨æŸ”軟ã«é›†è¨ˆã—ãŸã„ ã¨ã„ã†äººã¯å¤šã„ã‚“ã˜ã‚ƒãªã„ã§ã—ょã†ã‹ã€‚ リアルタイムåŽé›†ã¯Fluentdを使ãˆã°ã„ã‘ãã†ã§ã™ãŒã€é›†è¨ˆéƒ¨åˆ†ã‚’柔軟ã«ã¨ã„ã†ã¨ã©ã†ã ã‚ã†ã€‚ Cookpadã‚„Amebaã¯Hiveを使ã£ã¦ã‚‹ã¨ã®æƒ…å ±ãŒã‚る。 『Hive on AWS @ COOKPAD〠『Amebaã®ãƒã‚°è§£æžåŸºç›¤ã€ （ã©ã£ã¡ã‚‚å¤ã„。Hiveã¯Hadoop上ã§SQL（ã£ã½ã）ãƒã‚°è§£æžã™ã‚‹ãŸã‚ã®ãƒ—ãƒãƒ€ã‚¯ãƒˆã§ã™ï¼‰ 「é¢ç™½ãã†ã ãªãƒ¼ã€‚ã§ã‚‚Hadoopよãã‚ã‹ã‚‰ã‚“ã€ã¨ã„ã†ã‹ã‚µãƒ¼ãƒã„ã£ã±ã„ã„ã‚Šãã†ã ã‹ã‚‰æ‰¿èªé€šã™ã®ã‚ã‚“ã©ãã•ã„(´・ω・｀)〠ã¨ã‹æ€ã£ã¦ãŸã‚‰SoftwareDesignã®æœ€æ–°å·ã«ã“ã‚“ãªè¨˜äº‹ãŒã€‚ Cookpadã®äºº 「Treasure Dataã¯...ãƒã‚°è§£æžç”¨ã®å•†ç”¨ãƒ—ラットフォームをæä¾›ã—ã¦ã„ã¾ã™ã€‚ Fluentd経由ã§
crocos.jp
Fluentdã§åŽé›†ã—ãŸãƒã‚°ã®HTTPステータスコードを集計ã—ã€çµæžœã‚’GrowthForecastã§ã‚°ãƒ©ãƒ•åŒ–ã™ã‚‹ - FAT47ã®åº•è¾ºã‚¤ãƒ³ãƒ•ãƒ©è°äº‹éŒ²
自在ã«ã‚¿ã‚°ã‚’書ãæ›ãˆã‚‹ fluent-plugin-rewrite-tag-filter ã§ãƒã‚°è§£æžãŒæ—ã‚‹ãŠè©± #fluentd - Y-Ken Studio
稼åƒä¸ã®Fluentdã«flowcounter pluginã‚’å°Žå…¥ã—ã¦ã¿ãŸ
fluentd を利用ã—ãŸå¤§è¦æ¨¡ã‚¦ã‚§ãƒ–サービスã®ãƒã‚®ãƒ³ã‚°
http://dl.dropbox.com/u/224433/kamakura_pm_2/index.html
{{#tags}}- {{label}}
{{/tags}}