td-agent(Fluentd)ã‚’ãƒãƒ¼ã‚¸ãƒ§ãƒ³æŒ‡å®šã§ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«ã™ã‚‹ - QiitaDeleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?
Fluentd 入門 〜é‹ç”¨ã«å¿…è¦ãªåŸºç¤ŽçŸ¥è˜ã€œ
最近æ¥å‹™ã§ Fluentd を触るã“ã¨ãŒå‡ºã¦ãã¦å…¥é–€ã—ãŸã‚“ã§ã™ãŒã€æœ€åˆã®ã†ã¡ã¯ãƒˆãƒ©ãƒ–ルãŒèµ·ããŸæ™‚ã«ä½•ãŒèµ·ãã¦ã„ã‚‹ã®ã‹ã€ã©ã†å¯¾å‡¦ã—ãŸã‚‰è‰¯ã„ã®ã‹ãŒã•ã£ã±ã‚Šã‚ã‹ã‚‰ãªã‹ã£ãŸã®ã§ã€ã€ŒFluentd ã£ã¦ãƒã‚°ã®åŽé›†ã¨ã‹ã«ä½¿ã‚れるやã¤ã§ã—ょ？ã€ç¨‹åº¦ã®çŸ¥è˜ã—ã‹ãªã‹ã£ãŸéŽåŽ»ã®è‡ªåˆ†ã«å‘ã‘ã¦ã€Œã¨ã‚Šã‚ãˆãšã“ã‚Œãらã„ã¯çŸ¥ã£ã¦ãŠã‘ï¼ã€ã¨è¨€ã„ãŸã„内容をã¾ã¨ã‚ã¦ã¿ã¾ã—ãŸã€‚ トラブルãŒèµ·ããŸæ™‚ã«ã©ã®å‡¦ç†ã§å•é¡ŒãŒèµ·ãã¦ã„ã‚‹ã®ã‹ç´ æ—©ãコードを追ã†ã“ã¨ãŒã§ãã¦ã€ãƒ‡ãƒ¼ã‚¿ã®æ¶ˆå¤±ã‚’最å°é™ã«æŠ‘ãˆã¤ã¤é©åˆ‡ã«å¯¾å‡¦ã§ãるよã†ã«ãªã‚‹ã“ã¨ã‚’目的ã¨ã—ã¦ã„ã¾ã™ã€‚ ãªãŠã€ç¾æ™‚点ã§æœ€æ–°ç‰ˆã® Fluentd v0.14.21 を対象ã«ã—ã¦ã„ã¾ã™ã€‚ アジェンダ Getting Started Fluentd ã®ã‚¢ãƒ¼ã‚テクãƒãƒ£ Processes Supervisor process Worker process Threads Input thread En
Fluentdã§ãƒãƒƒãƒ•ã‚¡ã¤ãOutputPluginを使ã†ã¨ãã®ãƒ‡ãƒ•ã‚©ãƒ«ãƒˆå€¤ - ãŸã”ã‚‚ã‚Šã™ãƒ¡ãƒ¢
ãªã‚“ã‹è‡ªåˆ†ã§ docs.fluentd.org ã¸ã®patchを書ã„ã¦ã¦æ··ä¹±ã—ã¦ããŸã®ã§ã¾ã¨ã‚る。コードをèªã‚“ã§ã‚‚関係ã™ã‚‹è¨å®šå€¤ãŒã„ãã¤ã‚‚ã®ãƒ¢ã‚¸ãƒ¥ãƒ¼ãƒ«ã«åˆ†æ•£ã—ã¦ãŠã‚Šã€å®Œå…¨ã«æŠŠæ¡ã™ã‚‹ã“ã¨ãŒå›°é›£ã§ã‚る。具体的ã«ã¯ã€ã“ã®çµ„åˆã›ã‚’記憶ã ã‘ã§ç”ãˆã‚‰ã‚Œã‚‹ fluentd コミッタã¯ãŠãらã一人もã„ãªã„。 æ¦‚è¦ å¯¾è±¡ã¯ BufferedOutput ãŠã‚ˆã³ TimeSlicedOutput を継承ã—ã¦ã„ã‚‹ output plugin ã®å…¨ã¦*1。out_forward, out_exec ã‚„ out_exec_filter ã‚‚å«ã¾ã‚Œã‚‹ã€‚ 基本的ã«ã¯ã„ãã¤ã‹ã®è¨å®šã«ã‚ˆã‚Š flush ã‚’ã™ã‚‹ã‚¿ã‚¤ãƒŸãƒ³ã‚°ã‚’制御ã™ã‚‹ãƒ‘ラメータ一å¼ã€ãŠã‚ˆã³flush対象ã¨ãªã‚‹ãƒ‡ãƒ¼ã‚¿ã®ãƒãƒ£ãƒ³ã‚¯ã‚’溜ã‚ã¦ãŠãé‡ã®ä¸Šé™ã‚’決ã‚ã‚‹ã“ã¨ã¨ãªã‚‹ã€‚fluentd ã‚’ã†ã£ã‹ã‚Šè©¦ã—ãŸã¨ãã«ã€Œã‚¢ã‚¤ã‚¨ã‚¨ã‚¨ã€fluent-cat ã—ã¦ã¿ãŸã‚“ã ã‘ã©ã€è¨å®šã—ãŸã¨
fluentdを導入時ã«ã¾ãšçŸ¥ã£ã¦ãŠã„ãŸã»ã†ãŒã‚ˆã•ãã†ãªã“ã¨ï¼ˆã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«ã€ç›£è¦–ã€HA構æˆã€ãƒãƒ¥ãƒ¼ãƒ‹ãƒ³ã‚°ãªã©ï¼‰ - Qiita
fluentdを使ã†æ™‚ã«ã¾ãšçŸ¥ã£ã¦ãŠã„ãŸã»ã†ãŒã‚ˆã•ãã†ãªã“㨠ã¯ã˜ã‚ã« æœã‹ã‚‰Elasticsearchã¸ã®ãƒ‡ãƒ¼ã‚¿ã®æŠ•ã’è¾¼ã¿æ–¹ã‚’考ãˆã¦ã„ã¾ã—ãŸã€‚ データベースやメッセージã‚ューãªã©ã«ãƒ‡ãƒ¼ã‚¿ã‚’投ã’込んã§ãŠã„ã¦ã€ãƒ‹ã‚¢ãƒªã‚¢ãƒ«ãªãƒãƒƒãƒã§Elasticsearchã«æŠ•ã’込むよりもã€fluentdを使ã†æ–¹ãŒåœ§å€’çš„ã«ç°¡å˜ã§ä¿¡é ¼æ€§ãŒé«˜ã„ã‚‚ã®ãŒã§ãã¾ã™ã。自分ã§ä½œã‚Šã“ã‚€ã®ãŒãƒã‚«ã‚‰ã—ããªã‚Šã¾ã™ã。 ã¨ã„ã†ã“ã¨ã§ã€fluentd利用時ã«æ°—を付ã‘ã¦ãŠããŸã„ã“ã¨ã«ã¤ã„ã¦èª¿ã¹ã¦ã¿ã¾ã—ãŸã€‚内容ã¯å…¬å¼ãƒ‰ã‚ュメントã®å†…容をベースã«è‡ªèº«ã§èª¿ã¹ãŸã“ã¨ã‚’追記ã—ã¦ã„ã¾ã™ã€‚å…¬å¼ãƒ‰ã‚ュメントã¸ã®ãƒªãƒ³ã‚¯ã‚‚è²¼ã£ã¦ã‚ã‚Šã¾ã™ã®ã§é©å®œãã¡ã‚‰ã‚’ã”覧ã„ãŸã ã‘ã‚Œã°ã¨ã€‚ 環境 CentOS6.7 td-agent 0.12.19 Ruby2.2.2（リストアスクリプトã§åˆ©ç”¨ï¼‰ Fluent-Logger(0.5.1) Elasticsearch2.1.
fluent-tailã¨ã„ã†ãƒ„ールを書ã„㟠- still deeper
tl;dr fluentdを使ã£ã¦ã„ã‚‹ã¨ã€ãã®ã‚¹ãƒˆãƒªãƒ¼ãƒ ã«ã©ã†ã„ã†ãƒ‡ãƒ¼ã‚¿ãŒæµã‚Œã¦ã„ã‚‹ã‹ç¢ºèªã—ãŸã„ã“ã¨ãŒé »ç¹ã«ã‚ã£ã¦ã€ãã†ã„ã†æ™‚ã«ä¸€ã€…copy → stdoutãªconfigã‚’è¿½åŠ ã—ã¦reloadã™ã‚‹ã®ãŒé¢å€’ãªã®ã§ã€å°‚用ã®ãƒ„ールを書ãã¾ã—ãŸã€‚ ã“ã‚Œ → choplin/fluent-tail インストール $ fluent-gem install fluent-tail 事å‰æº–å‚™ in_debug_agent ãŒæä¾›ã—ã¦ã„ã‚‹drubyã®å…¥ã‚Šå£ã‚’使ã†ã®ã§æœ‰åŠ¹ã«ã—ã¦ãŠã„ã¦ä¸‹ã•ã„。 <source> type debug_agent </source> 使ã„æ–¹ <match> ã¨åŒæ§˜ã®å½¢å¼ã§ãƒ‘ターンを指定ã™ã‚‹ã¨ã€ãã®ãƒ‘ターンã«ãƒžãƒƒãƒã—ãŸã‚¤ãƒ™ãƒ³ãƒˆãŒæ¨™æº–出力ã«å‡ºã¾ã™ã€‚ fluentdã‚’èµ·å‹•ã—㦠$ fluentd fluent-tailを実行ã™ã‚‹ $ fluent-tail "foo.**" ãã“ã«ã‚¤
Fluentdã®ãŠå‹§ã‚システム構æˆãƒ‘ターン
2014å¹´9月9日開催ã®ã€Žã‚µãƒ¼ãƒ/インフラエンジニア養æˆèªæœ¬ ãƒã‚°åŽé›†ã€œå¯è¦–化編ã€ã€€å‡ºç‰ˆè¨˜å¿µï¼åŸ·ç†è€…ãŒèªžã‚‹å¤§è¬›æ¼”ä¼šï¼ ã§ã®ç™ºè¡¨ã‚¹ãƒ©ã‚¤ãƒ‰ã§ã™ã€‚ Read less
Fluentd meetup dive into fluent plugin (outdated)
Fluentd meetup in Japan. I talked about "Dive into Fluent plugin". Some contents are outdated. See this slide: http://www.slideshare.net/repeatedly/dive-into-fluentd-plugin-v012Read less
fluent-debugã¨æˆ¯ã‚Œã‚‹ - Qiita
ã“ã‚“ã«ã¡ã¯ã€ã“ã¡ã‚‰ã¯Fluentd Advent Calendar 19日目ã®è¨˜äº‹ã¨ãªã‚Šã¾ã™ã€‚ fluentdã®å‹•ä½œã‚’確èªã™ã‚‹ã¨ãã‚„pluginã®ãƒ‡ãƒãƒƒã‚°ã‚’ã™ã‚‹æ™‚ãªã©ã«ã€print文を埋ã‚込んã ã‚Šã—ã¦ã„ã¾ã—ãŸãŒã€ãµã¨ã—ãŸãã£ã‹ã‘ã§td-agentパッケージã«ã€Œ fluent-debug ã€ãªã‚‹ã‚‚ã®ãŒåŒæ¢±ã•ã‚Œã¦ã„ã‚‹ã“ã¨ã‚’知りã¾ã—ãŸã€‚ã•ã£ãã使ã£ã¦ã¿ã‚ˆã†ã¨æ€ã„ã¾ã—ãŸãŒã€ã“ã‚Œã«é–¢ã™ã‚‹è¨˜äº‹ãŒã»ã¨ã‚“ã©å‡ºã¦ãã¾ã›ã‚“ã§ã—ãŸ...。 ã¨ã„ã†ã‚ã‘ã§ã€ã›ã£ã‹ããªã®ã§ä»Šå›žã¯fluent-debugを触ã£ã¦ã¿ãŸè©±ã‚’ã—ãŸã„ã¨æ€ã„ã¾ã™ã€‚ fluent-debugã¨ã¯ 実行ä¸ã®fluentdã«å¯¾ã—ã¦gdbã®ã‚ˆã†ã«ã€ã‚¢ã‚¿ãƒƒãƒã—ã¦å†…部をã”ã«ã‚‡ã”ã«ã‚‡ã§ãるツールã§ã€ fluentdã®å…¬å¼ãƒ‰ã‚ュメント ã«ã‚‚記載ã•ã‚Œã¦ã„ã¾ã™ã€‚内部ã§ã¯ dRuby を使ã£ã¦ãŠã‚Šã€ DRbObject 㨠DRbServer を利用ã™ã‚‹ã“ã¨ã§flu
#fluentd fluent-plugin-file-alternative released! - ãŸã”ã‚‚ã‚Šã™ãƒ¡ãƒ¢
fluentd 標準ã®ãƒ•ã‚¡ã‚¤ãƒ«å‡ºåŠ›ãƒ—ラグイン out_file ã¯ãƒ¡ãƒƒã‚»ãƒ¼ã‚¸ã‚’JSONã«ã‚·ãƒªã‚¢ãƒ©ã‚¤ã‚ºã—ã¦å‡ºåŠ›ã™ã‚‹ã¨ã„ã†ã‚‚ã®ã§ã€ã“ã‚Œã¯ã“ã‚Œã§ã¾ã‚ã„ã„ã‚“ã ã‘ã©ã€JSONã ã¨é€†ã«æ‰±ã„ã¥ã‚‰ã„ケースãªã‚“ã‹ã‚‚UNIXã®æ–‡åŒ–ã§ã¯ã‚ã‚Œã“ã‚Œã‚る。ã¾ãŸå®Œå…¨ã«JSONã¨ã„ã†ã‚ã‘ã§ã‚‚ãªãã€è¡Œé ã«ã‚¿ãƒ–区切りã§æ—¥æ™‚ã¨ã‚¿ã‚°ãŒå…¥ã£ã¦ãŸã‚Šã‚‚ã™ã‚‹ãŸã‚ã€ã„ããªã‚Š JSON parser ã«ã‹ã‘ã‚‹ã‚ã‘ã«ã‚‚ã„ã‹ãªã‹ã£ãŸã‚Šã—ã¦é¢å€’ã ã ã 。 ã¨ã„ã†ã“ã¨ã§ã€å‡ºåŠ›ãƒ•ã‚©ãƒ¼ãƒžãƒƒãƒˆã‚’ã•ã¾ã–ã¾ã«ã„ã˜ã‚Œã‚‹ã‚ˆã†ã«ã—ãŸãƒ—ラグイン out_file_alternative を作り fluent-plugin-file-alternative ã¨ã—ã¦ãƒªãƒªãƒ¼ã‚¹ã—ã¾ã—ãŸã€‚ fluent-plugin-file-alternative | RubyGems.org | your community gem host tagomoris/fluent-plugin
fluentdã«ã‚ˆã‚‹ãƒã‚°åŽé›†ã‚·ã‚¹ãƒ†ãƒ ã®æ§‹ç¯‰ï½žåŸºæœ¬ç·¨
サーãƒãƒ¼ã®ã‚»ãƒƒãƒˆã‚¢ãƒƒãƒ— fluentdã®ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«å…¬å¼ãƒ‰ã‚ュメントã®ã¨ãŠã‚Šã€ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ©ãƒ¼ã‚’実行ã—ã¦ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«ã—ã¾ã™ã€‚ $ curl -s http://toolbelt.treasuredata.com/sh/install-redhat.sh | sudo bash 実行ã™ã‚‹ã¨ã€TresureDataã®ãƒªãƒã‚¸ãƒˆãƒª(/etc/yum.repo.d/td.repo)ãŒä½œæˆã•ã‚Œã€RPMパッケージãŒã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«ã•ã‚Œã¾ã™ã€‚ [vagrant@fluentd-server ~]$ curl -s http://toolbelt.treasuredata.com/sh/install-redhat.sh | sudo bash This script requires superuser access to install rpm packages. You will be prompted f
ãƒã‚°åŽé›†åŸºç›¤ã®Fluentdã¨Flume NGã€ã©ã¡ã‚‰ãŒä½¿ã„ã‚„ã™ã„？
ãƒã‚°ã¯ã€ã‚·ã‚¹ãƒ†ãƒ ã®éšœå®³è§£æžï¼ˆãƒ‡ãƒãƒƒã‚°ï¼‰ã‚„é‹ç”¨ãƒ¢ãƒ‹ã‚¿ãƒªãƒ³ã‚°ã«ä½¿ã†ã“ã¨ã‚’想定ã—ã¦ã€ã‚³ãƒ³ãƒ”ュータã«ç™ºç”Ÿã—ãŸã‚¤ãƒ™ãƒ³ãƒˆã®å±¥æ´ã‚’時系列ã«æ²¿ã£ã¦ãƒ•ã‚¡ã‚¤ãƒ«ã«å‡ºåŠ›ã—ãŸã‚‚ã®ã§ã‚る。有用ãªãƒ‡ãƒ¼ã‚¿ã§ã¯ã‚ã‚‹ãŒã€æ‰±ã„ã«ãã„é¢ãŒã‚る。ãã®ãŸã‚ã€è¤‡æ•°ã®ãƒã‚°ã‚’çªãåˆã‚ã›ã¦åˆ†æžã™ã‚‹ã¨ã„ã£ãŸæ´»ç”¨ãŒé›£ã—ãã€å¾“æ¥ã¯ã‚‚ã£ã±ã‚‰ä¸€ã¤ã®ãƒã‚°ã‚’å˜ç‹¬ã§åˆ©ç”¨ã™ã‚‹ã«ã¨ã©ã¾ã‚‹ã‚±ãƒ¼ã‚¹ãŒå¤šã‹ã£ãŸã€‚ 扱ã„ã«ãã„é¢ã¨ã¯ã€ä¾‹ãˆã°ã€Œãƒã‚°ã‚’一括ã—ã¦å‡¦ç†ã™ã‚‹ã«ã¯å¯¾è±¡ãƒã‚°ã‚’å„サーãƒãƒ¼ã‹ã‚‰åŽé›†ã—ãªã‘ã‚Œã°ãªã‚‰ãªã„ã€ã€Œãƒã‚°ã¯ã‚µã‚¤ã‚ºãŒå¤§ãããªã‚ŠãŒã¡ãªã®ã§åŽé›†ã™ã‚‹å ´åˆã¯ä¸€éƒ¨ã‚’抜ã出ã™ãªã©ã®åŠ å·¥ãŒå¿…è¦ã€ã¨ã„ã£ãŸã“ã¨ã§ã‚る。ãƒã‚°ã«æ–°ãŸãªãƒ‡ãƒ¼ã‚¿ãŒæ›¸ãè¾¼ã¾ã‚ŒãŸéš›ã«ã€ãれをå³åº§ã«å–り出ã™æ‰‹æ®µãŒç”¨æ„ã•ã‚Œã¦ã„ãªã„ã“ã¨ã‚‚ãã†ã 。 ã“ã†ã—ãŸãƒã‚°ã®æ‰±ã„ã«ãã•ã¯ã€ã€Œãƒã‚°åŽé›†åŸºç›¤ã€ã¨å‘¼ã°ã‚Œã‚‹ã‚½ãƒ•ãƒˆã‚¦ã‚¨ã‚¢ã‚’使ã†ã“ã¨ã§å…‹æœå¯èƒ½ã§ã‚る。ãƒã‚°åŽé›†åŸºç›¤ã¯ã€è¤‡æ•°ã®ãƒã‚°ã‚’çµã³ä»˜ã‘ã¦åˆ†æžã™ã‚‹éš›ãªã©ã«å¿…è¦ãªã€å¯¾è±¡ãƒã‚°
S3ã¨Fluentdを用ã„ãŸåŠ¹çŽ‡çš„ãªãƒã‚°ç®¡ç† | SmartNews開発者ブãƒã‚°
ゴクãƒã®å¤§å¹³ã§ã™ã€‚ ç§ã«ã¨ã£ã¦ä¸€ç•ªå¤§äº‹ã§æ›¿ãˆã®åŠ¹ã‹ãªã„ミュージシャンã¯ã•ã ã¾ã•ã—ã•ã‚“ã§ã™ãŒã€ç§ã«ã¨ã£ã¦ã‚¯ãƒ©ã‚¦ãƒ‰ã‚³ãƒ³ãƒ”ューティングã®ã‚µãƒ¼ãƒ“スã®ä¸ã§ä¸€ç•ªå¤§äº‹ã§æ›¿ãˆãŒåŠ¹ã‹ãªã„サービスã¯S3ã§ã™ã€‚ 多種多様ãªAPIを用ã„ã¦æŸ”軟ã«ãƒ•ã‚¡ã‚¤ãƒ«ã®æ“作ãŒå‡ºæ¥ã‚‹äº‹ã‚„ã€â€99.999999999ï¼…â€ã¨è¬³ã‚ã‚Œã¦ã„る高ã„è€éšœå®³æ€§ã€S3ã«ã‚るデータをElastic MapReduceã‚„Redshiftãªã©ã‚’用ã„ã¦æ‰‹è»½ã«ãƒ‡ãƒ¼ã‚¿è§£æžã‚’è¡Œãˆã‚‹åŸºç›¤ãŒæä¾›ã•ã‚Œã¦ã„ã‚‹ã“ã¨ãªã©ã€ã‚ã¾ã‚Šã«ä¾¿åˆ©ã™ãŽã¦S3ã®ä»£æ›¿ã¨ãªã‚‹ã‚µãƒ¼ãƒ“スを探ã—ã ã™ã®ãŒé›£ã—ã„状態ã§ã™ã€‚ ã‚‚ã¡ã‚ん多ãã®AWSユーザーãŒåŒã˜ã‚ˆã†ã«S3ã®ä¾¿åˆ©ã•ã‚’享å—ã—ã¦ã„ã‚‹ã¨æ€ã„ã¾ã™ã—ã€ã‚¤ãƒ³ã‚¿ãƒ¼ãƒãƒƒãƒˆä¸Šã§ã‚‚多ãã®ãƒ–ãƒã‚°ç‰ã§ãã®é…力ãŒèªžã‚‰ã‚Œã¦ã„ã¾ã™ã€‚ãã®ä¸ã§æœ¬è¨˜äº‹ã¯æ—¢ã«å˜åœ¨ã™ã‚‹è¨˜äº‹ã¨ä¼¼ãŸã‚ˆã†ãªå†…容を書ã„ã¦ã—ã¾ã†ã‹ã‚‚ã—ã‚Œã¾ã›ã‚“ãŒã€å¼Šç¤¾ãªã‚Šã®S3ã®ä½¿ã„æ–¹ã«ã¤ã„ã¦ã”紹介ã—ãŸã„ã¨æ€ã„ã¾ã™ã€‚ ãªãŠ
GrowthForecast - Lightning fast Graphing / Visualization
GrowthForecast is a web tool that let's you graph all sorts of metrics via a WebAPI. Our simple API let's you create and update charts in real time, customize your charts through a Web interface, and create charts that combine multiple metrics. You can graph your MySQL data with 1 line of code $ crontab -l */5 * * * * curl -F number=`mysql -BN -e 'select count(*) from member' game` http://example.
サービス終了ã®ãŠçŸ¥ã‚‰ã› - NAVER ã¾ã¨ã‚
サービス終了ã®ãŠçŸ¥ã‚‰ã› NAVERã¾ã¨ã‚ã¯2020å¹´9月30日をもã¡ã¾ã—ã¦ã‚µãƒ¼ãƒ“ス終了ã„ãŸã—ã¾ã—ãŸã€‚ ç´„11å¹´é–“ã€NAVERã¾ã¨ã‚ã‚’ã”利用・ã”愛顧ã„ãŸã ãèª ã«ã‚ã‚ŠãŒã¨ã†ã”ã–ã„ã¾ã—ãŸã€‚
fluentd + mongodb+ node.js ã§ãƒªã‚¢ãƒ«ã‚¿ã‚¤ãƒ ã«ã‚°ãƒ©ãƒ•ã‚’æã - stanaka's blog
追記 2/22 毎回微妙ã«è¿½è¨˜ã—ã¦ã„ã¾ã™ãŒã€ä»Šå›žã‚‚追記ã§ã™ã€‚最後ã«mongodbã®insert性能ã«ã¤ã„ã¦80lines/secã§åŽ³ã—ããªã£ãŸã€ã¨æ›¸ã„ã¦ã¾ã™ãŒã€ç’°å¢ƒã‹è¨å®šã¾ã‚ã‚ŠãŒã‚ã‚„ã—ã„ã®ã§è¨‚æ£ã—ã¾ã™ã€‚ã‚‚ã†ã™ã“ã—検証ã—ã¦ã¿ã‚ˆã†ã¨æ€ã„ã¾ã™ã€‚ → 検証ã—㦠fluentdå´ã®è¨å®šã®å•é¡Œã§ã‚ã‚‹ã“ã¨ãŒåˆ†ã‹ã‚Šã¾ã—ãŸã€‚詳ã—ãã¯ã€http://blog.stanaka.org/entry/2013/02/22/171053 追記ã“ã“ã¾ã§ 最近ã¯ã€fluentd + mongodb ã§ãƒã‚°ã‚’è“„ç©ã—ã¦ã„ã‚ã„ã‚便利ã«ä½¿ã£ã¦ã„ã‚‹ã‚ã‘ã§ã™ãŒã€æ•°åˆ†ã«ä¸€å›žé›†è¨ˆã‚¹ã‚¯ãƒªãƒ—トを周ã—ãŸã‚Šã€ GrowthForecast ã®ç”»é¢ã‚’リãƒãƒ¼ãƒ‰ã—ã¾ãã‚‹ã®ã§ã¯ãªãã€ã‚‚ã£ã¨ãƒªã‚¢ãƒ«ã‚¿ã‚¤ãƒ ã§è¦‹ãŸã„! ã¨ã„ã†æ¬²æ±‚ãŒå‹Ÿã£ã¦ããŸã®ã§ã€ node.js を使ã£ã¦å®Ÿè£…ã—ã¦ã¿ã¾ã—ãŸã€‚( https://github.com/stanaka/realti
fluentdã‚’å°Žå…¥ã—ã¾ã—ãŸï¼†webサーãƒãƒ¼ä¸Šã®agentãŒçµæ§‹ãƒ¡ãƒ¢ãƒªã‚’消費ã™ã‚‹ã‚ˆ - hito_asaã®æ—¥è¨˜
ãã“ãã“ã®ãƒˆãƒ©ãƒ•ã‚£ãƒƒã‚¯ã®ã‚ã‚‹Webサーãƒãƒ¼ä¸Šã§ã€ã‚¢ãƒ—リケーションã‹ã‚‰å‡ºåŠ›ã•ã‚Œã‚‹ã„ãã¤ã‹ã®ãƒã‚°ãƒ•ã‚¡ã‚¤ãƒ«ã‚’åŽé›†ã™ã‚‹ãŸã‚ã«Fluentdã‚’å°Žå…¥ã—ã¾ã—ãŸã€‚ セットアップã¯ã“ã‚“ãªæ„Ÿã˜ã€‚ fluentdã®ãƒãƒ¼ã‚¸ãƒ§ãƒ³ã¯0.10.15, rvmãŒ1.10.3, rubyãŒ1.9.3p125 ã§ã™ã€‚ Webサーãƒãƒ¼ã¯20å°ã§ã€ä¸€ç•ªå¤šã„サーãƒãƒ¼ã§800万req/dayãらã„ã®è¦æ¨¡ã§ã™ã€‚ å„Webサーãƒãƒ¼ä¸Šã§ã¯in_tailã§3ã¤ã®ãƒ•ã‚¡ã‚¤ãƒ«ã‚’tailã—ã€out_roundrobin & out_forwardã§è¨ˆ4å°ã®é›†è¨ˆç”¨ã‚µãƒ¼ãƒãƒ¼ã«æµã—ã¦ã€ãã“ã§ãƒ¬ã‚³ãƒ¡ãƒ³ãƒ‡ãƒ¼ã‚·ãƒ§ãƒ³ã‚„KPIã®é›†è¨ˆã‚’è¡Œã£ã¦ã„ã¾ã™ã€‚ Webサーãƒãƒ¼ä¸Šã®agentã¨ã—ã¦å‹•ãFluentdã®è¨å®šãƒ•ã‚¡ã‚¤ãƒ«ã¯ã“ã‚“ãªæ„Ÿã˜ã€‚ ã“ã®3ã¤ã®ãƒ•ã‚¡ã‚¤ãƒ«ã¯ã€ãã‚Œãžã‚Œdailyã§ãƒãƒ¼ãƒ†ãƒ¼ãƒˆã•ã‚Œã¦ã¦ã€1日当ãŸã‚Š 460万行ã€640万行ã€370万行ãらã„ã§ã™ã€‚ èµ·å‹•ã¯ä»¥ä¸‹ã®ã‚¹
1
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
Fluentd ソースコード完全解説 (v0.10å‘ã‘)
Fluentd ã® out_forward プラグインã§è‰¯ã出る warning メッセージã¨ãã®è² è·å¯¾ç–ã¾ã¨ã‚ : sonots:blog
{{#tags}}- {{label}}
{{/tags}}