dockerãªã‚‰5分ã§å‹•ãï¼ nginxã®ãƒã‚°ã‚’fluentdã§é›†ã‚ã¦norikraã§ã‚¹ãƒˆãƒªãƒ¼ãƒ åˆ†æž - QiitaDeleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?
Webサーãƒã®ä»®æƒ³ãƒ›ã‚¹ãƒˆå˜ä½ã®ãƒªã‚½ãƒ¼ã‚¹ä½¿ç”¨é‡ã‚’Fluentd+Norikra+GrowthForecastã§ã‚°ãƒ©ãƒ•åŒ– - 人間ã¨ã‚¦ã‚§ãƒ–ã®æœªæ¥
ã”å˜çŸ¥ã®é€šã‚Šã€Apacheã®VirtualHost（以下vhost）ã€æ‰€è¬‚ã€Webサーãƒã®ä»®æƒ³ãƒ›ã‚¹ãƒˆã¯å˜ä¸€ã®Apacheã§è¤‡æ•°ã®ãƒ›ã‚¹ãƒˆã‚’処ç†ã—ã¦ã„ã¾ã™ã€‚ãã®ãŸã‚ã€è¤‡æ•°ã®vhostã‚’å«ã‚ãŸCPU使用é‡ã¨ã„ã£ãŸãƒªã‚½ãƒ¼ã‚¹ä½¿ç”¨é‡ã‚’グラフ化ã™ã‚‹ã“ã¨ã¯ç°¡å˜ãªã®ã§ã™ãŒã€vhostå˜ä½ã¨ãªã‚‹ã¨å„vhostã¸ã®ãƒªã‚¯ã‚¨ã‚¹ãƒˆå˜ä½ã§ã®ãƒªã‚½ãƒ¼ã‚¹ã‚’計測ã—ã¦ãŠã‹ãªã„ã¨ã‚°ãƒ©ãƒ•åŒ–ã™ã‚‹ã“ã¨ã¯ã§ãã¾ã›ã‚“。ãã†ã„ã†æ„味ã§vhostå˜ä½ã§ãƒªã‚½ãƒ¼ã‚¹ä½¿ç”¨é‡ã‚’グラフ化ã—よã†ã¨ã™ã‚‹ã¨ä¸€æ°—ã«æ•·å±…ãŒä¸ŠãŒã£ã¦ã—ã¾ã„ã¾ã™ã€‚ ã¾ãŸã€uid毎ã«å®Ÿè¡Œãƒ—ãƒã‚»ã‚¹ã‚’分離ã—ã¦ãŠã‘ã°ã€pacctã¨ã„ã£ãŸãƒ—ãƒã‚»ã‚¹ã‚¢ã‚«ã‚¦ãƒ³ãƒ†ã‚£ãƒ³ã‚°æ©Ÿèƒ½ã§uidã®ã‚«ã‚¦ãƒ³ãƒˆã¯ã§ãã¾ã™ãŒã€ãƒªã‚¢ãƒ«ã‚¿ã‚¤ãƒ ã®è¨ˆæ¸¬ï¼ˆç§’ã¨ã‹åˆ†ã®ã‚ªãƒ¼ãƒ€ãƒ¼ï¼‰ã«ã¯ã‚³ã‚¹ãƒˆãŒé«˜ã‹ã£ãŸã‚Šã€vhostã§æä¾›ã—ã¦ã„るコンテンツã«ã‚ˆã£ã¦ã¯ã€Apache権é™ã§é…ä¿¡ã•ã‚Œã¦ã„ã‚‹ã‚‚ã®ã‚‚ã‚る（é™çš„コンテンツ）ãŸã‚ã€æ£ç¢ºã«è¨ˆæ¸¬ã™ã‚‹ã“ã¨ã¯é›£ã—ããª
æ–°ã—ã„オープンソースEmbulkを発表1 - トレジャーデータ（Treasure Data）ブãƒã‚°
ã¯ã˜ã‚㫠トレジャーデータã¯ã‚¯ãƒ©ã‚¦ãƒ‰ã§ãƒ‡ãƒ¼ã‚¿ãƒžãƒãƒ¼ã‚¸ãƒ¡ãƒ³ãƒˆã‚µãƒ¼ãƒ“スをæä¾›ã—ã¦ã„ã¾ã™ã€‚ 2015å¹´1月，Fluentd ã®ã‚³ãƒŸãƒƒã‚¿ãƒ¼ï¼ˆå¼Šç¤¾ã‚¨ãƒ³ã‚¸ãƒ‹ã‚¢ï¼‰ãŒä¸å¿ƒã¨ãªã£ãŸã€ŒEmbulkã€ã¨ã„ã†OSSãŒå…¬é–‹ã•ã‚Œã¾ã—ãŸã€‚ã“ã®ãƒ„ールã¯å¤§è¦æ¨¡ãªãƒ‡ãƒ¼ã‚¿ã‚»ãƒƒãƒˆã®ãƒãƒ«ã‚¯ã‚¤ãƒ³ãƒãƒ¼ãƒˆã‚’è¡Œãˆã‚‹ãƒ‡ãƒ¼ã‚¿åŽé›†ãƒ„ールã®1ã¤ã«å¤§åˆ¥ã•ã‚Œã‚‹ã‚‚ã®ã§ã™ã€‚ ↑ メインコミッターã§ã‚る当社エンジニア：å¤æ©‹ã¯ Fluentd ã‚„ MessagePack ã¨ã„ã£ãŸOSSを生ã¿å‡ºã—ã¦ãã¾ã—ãŸã€‚ãã—ã¦ï¼Œãƒˆãƒ¬ã‚¸ãƒ£ãƒ¼ãƒ‡ãƒ¼ã‚¿ã®ãƒ—ラットフォームã®æ ¹å¹¹ã‚’作り上ã’ãŸã®ã‚‚å½¼ãªã®ã§ã™ã€‚ Embulk ã¨ã¯ä½•ã‹ï¼Ÿ Embulkã¨ã¯ã©ã®ã‚ˆã†ãªã‚‚ã®ãªã®ã§ã—ょã†ã‹ï¼Ÿã€€ãƒãƒ«ã‚¯ã‚¤ãƒ³ãƒãƒ¼ãƒˆã‚’è¡Œã†ãŸã‚ã®ãƒ„ールã¯ï¼Œã¯ã‚‹ã‹ä»¥å‰ã‹ã‚‰ãŸãã•ã‚“å˜åœ¨ã—ã¾ã™ãŒï¼Œãã®ä¸ã«ãŠã„ã¦Embulk ã®ä½ç½®ä»˜ã‘ã¯ã©ã“ã«ã‚ã‚‹ã®ã§ã—ょã†ã‹ï¼Ÿã€€å°‘ã—ãšã¤ç´ã¨ã„ã¦ã„ãã¾ã—ょã†ã€‚ 「簡å˜ã«è¨€ã†ã¨Fluentdã®ãƒãƒƒ
Fluentdã¨ã¯ã©ã®ã‚ˆã†ãªã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ãªã®ã‹ - ãŸã”ã‚‚ã‚Šã™ãƒ¡ãƒ¢
Fluentd ã¨ã„ã†ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ãŒã‚る。日本国内ã§ã¯ãã“ãã“話題ã«ãªã£ã¦ããŸãŒã€ä½•ãŒã§ãã‚‹ã®ã‹ã€ä½•ã«ä½¿ã†ã¨å¬‰ã—ã„ã®ã‹ã€ä½•ã«ä½¿ãˆã‚‹ã®ã‹ã€ã¨ã„ã†ç‚¹ã«ã¤ã„ã¦è©³ç´°ã‚’よã知らãªã„ã¨ã„ã†äººã‚‚ãŠãらãã¾ã 多ã„ã“ã¨ã§ã—ょã†ã€‚ ãªã®ã§ã€ç°¡å˜ã«ã¾ã¨ã‚る。 http://fluentd.org/ ãªãŠä»¥ä¸‹ã®å€‹åˆ¥é …ç›®ã”ã¨ã«æ›¸ã„ã¦ã„ããŒã€ãã®æ‰‹å‰ã«ã¾ã¨ã‚ã‚’ç½®ã„ã¦ãŠãã®ã§å¿™ã—ã„人ã¯ãã‚Œã ã‘èªã‚€ã¨ã‚ˆã„。インストールやè¨å®šã«ã¤ã„ã¦ã¯å°Žå…¥éƒ¨åˆ†ã«ã¤ã„ã¦ã¯æ—¥æœ¬èªžã®è¨˜äº‹ã¯ã‚‚ã†å¤šãã‚ã‚‹ã®ã§ã€è§¦ã‚Œãªã„。 æ¦‚è¦ ã§ãã‚‹ã“㨠ãƒã‚°ã®åŽé›† センサデータç‰ã®åŽé›† 汎用データ処ç†ãƒ—ãƒã‚»ãƒƒã‚µã¨ã—ã¦ é »å‡ºãƒ¦ãƒ¼ã‚¹ã‚±ãƒ¼ã‚¹ ãƒã‚°ã®åŽé›† データã®é›†ç´„ ç°¡å˜ãªãƒªã‚¢ãƒ«ã‚¿ã‚¤ãƒ 集計 ソフトウェアã¨ã—ã¦ã®ç‰¹å¾´ コア プラグイン 安定性 性能 開発体制 コミュニティ ã¶ã£ã¡ã‚ƒã‘ã©ã†ãªã®ï¼Ÿ ã¾ã¨ã‚ ç¾æ™‚点ã§ã€è¤‡æ•°ã®å ´æ‰€ã«åˆ†æ•£ã—ãŸãƒ‡ãƒ¼ã‚¿ã‚„常ã«å¢—ãˆç¶šã‘るデータã®å®‰å…¨ãªè»¢
Fluentdã¨Google BigQueryã§éŠã¶ãžï¼ - パルカワ2
ã¨ã„ã†å…¥é–€è¨˜äº‹ã‚’書ã“ã†ã¨æ€ã„ã¾ã—ãŸãŒã€æœ€é«˜ã®è¨˜äº‹ãŒã‚ã£ãŸã®ã§ã‚„ã‚ã¾ã—ãŸã€‚ ã“ã¡ã‚‰ã‚’å‚ç…§ã™ã‚‹ã¨è‰¯ã„ã§ã™ã€‚ ã¡ãªã¿ã«ã“ã†ã„ã†ã‚¹ã‚¯ãƒªãƒ—トをピッã¨æ›¸ã„ãŸã‚‰ãƒ‡ãƒ¼ã‚¿ãŒé€ã‚Œã¦ã‚‹ã“ã¨ãŒç¢ºèªå‡ºæ¥ã¾ã—ãŸã€‚ use strict; use warnings; use Fluent::Logger; my $logger = Fluent::Logger->new( host => '127.0.0.1', port => 24224, ); $logger->post("access.log", { uri => "http://google.com", request => { addr => "test-addr", ua => "test-ua", referrer => "test-referrer", }, }); 触ã£ãŸæ„Ÿã˜ä¾¿åˆ©ãã†ãªã®ã§ã€ãªã‚“ã‹ã‚„ã‚ŠãŸã„。 ã“れもé¢ç™½ã„æ„Ÿã˜ãŒã—ã¾ã™ã€‚
Fluentdã§Google BigQueryã«ãƒã‚°ã‚’挿入ã—ã¦ã‚¯ã‚¨ãƒªã‚’実行ã™ã‚‹ - Qiita
Googleã®è™Žã®åBigQueryã‚’FluentdユーザーãŒä½¿ã‚ãªã„ç†ç”±ã¯ãªããªã£ãŸã¨ã®ã“ã¨ã€‚ Googleã®è™Žã®å「BigQueryã€ã‚’FluentdユーザーãŒä½¿ã‚ãªã„ç†ç”±ãŒãªããªã£ãŸç†ç”± #gcpja - Qiita よã—ã€Google BigQueryを使ã£ã¦è¶…高速ãƒã‚°è§£æžã !!!!ã¨æ€ã£ã¦ã„ã‚‹ã¨ãã“ã¾ã§ã®é“ã®ã‚Šã¯é•·ã‹ã£ãŸã€‚ Google BigQueryã®ç’°å¢ƒã‚’構築ã™ã‚‹ Google BigQueryã¯Google Cloud Platformã®ã‚µãƒ¼ãƒ“スã®1ã¤ã§ã‚る。Google Cloud Platformã«ã¯æ§˜ã€…ãªã‚µãƒ¼ãƒ“スãŒã‚ã‚Šã€çµ±åˆã•ã‚Œã¦ã„るよã†ãªã€ã•ã‚Œã¦ã„ãªã„よã†ãªä½œã‚Šã«ãªã£ã¦ã„る。AWSã®Webインターフェースも難ã—ã„ã‘ã©ã€Google Cloud Platformもよãã‚ã‹ã‚‰ãªã„ã®ã§è¦šæ‚Ÿã—ã¦ã‹ã‹ã‚ã†ã€‚å…¬å¼ã®ãƒ‰ã‚ュメントも記述ãŒå¤ã„ã¨ãã‚‚ã‚ã‚‹ã®ã§ç–‘ã£ã¦ã‹ã‹ã‚ã†ã€‚ プãƒã‚¸
IRCサーãƒã‚’ç«‹ã¦ã¦è‰²ã€…連æºã—ã¦ã¿ãŸãƒ¡ãƒ¢ - アルパカDiary Pro
ã‚„ã£ã¨ã“ã•ä»Šã®ç¾å ´ã« znc / irc / ikachan ã¨ã„ã†ç’°å¢ƒã‚’構築ã—〠テンションãŒä¸ŠãŒã£ã¦å‹¢ã„ã§ä½œæ¥ã—ãŸã“ã¨ã‚’メモã£ã¦ã¿ã¾ã™ã€‚ æ£æœˆä¼‘ã¿ã«ã®ã‚“ã³ã‚Šã‚³ãƒ¼ãƒ‡ã‚£ãƒ³ã‚°ã—ã¦ã¾ã—ãŸã€‚ ã‚„ã£ãŸã“ã¨ä¸€è¦§ fluentdã§nginxã®ã‚¨ãƒ©ãƒ¼ãƒã‚°ã‚’監視ã—ã¦ikachanã«æŠ•ã’ã‚‹ nagiosã‹ã‚‰ikachanã«æŠ•ã’ã‚‹ gitリãƒã‚¸ãƒˆãƒªã®pushを監視ã—ã¦ikachanã«æŠ•ã’ã‚‹ beproud_botã®çœŸä¼¼ã£åbot unazu_kun bot syonago bot fluentdã§nginxã®ã‚¨ãƒ©ãƒ¼ãƒã‚°ã‚’監視ã—ã¦ikachanã«æŠ•ã’ã‚‹ ã„ã¾ã¯nginxエラーãƒã‚°ã ã‘監視ã—ã¦ã¾ã™ã€‚ <match nginx.error.**> type copy <store> type ikachan host xxxxxxxxxxxxxxxxxxxxx port 5979 channel nginx-not
ãƒã‚°é›†è¨ˆï¼æ™‚系列DBï¼å¯è¦–化ツールã®èª¿æŸ»çµæžœ - Qiita
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? è¿‘å¹´ã€è‡ªåˆ†ã®ä¸ã§é›†è¨ˆï¼å¯è¦–化㯠Fluentd(datacounter)+Growthforecast ã§å®šç•ªåŒ–ã—ã¦ã„ã¾ã—ãŸã€‚ ã—ã‹ã—プãƒãƒ€ã‚¯ãƒˆã§æ–°ãŸã«é›†è¨ˆï¼å¯è¦–化ã®è¦ä»¶ãŒå‡ºã¦ããŸã“ã¨ã¨ã€ 最近å¯è¦–化ツール周り㧠「Kibanaã£ã¦ãªã‚“ã˜ã‚ƒï¼Ÿã€ã€ŒGraphiteã£ã¦ãªã‚“ã˜ã‚ƒï¼Ÿã€ã€ŒInfluxDBã£ã¦ãªã‚“ã˜ã‚ƒï¼Ÿã€ ãªã©ã€ã“ã®ãƒ„ールé”ã¯ä¸€ä½“何ãªã‚“ã ã‚ã†â€¦ï¼Ÿã¨ã„ã†ã®ãŒå‰ã€…ã‹ã‚‰æ°—ã«ãªã£ã¦ã„ã¾ã—ãŸã€‚ 今回良ã„機会ãªã®ã§ ◯◯ã¯ä½•ã‚’ã™ã‚‹ã‚‚ã®ãªã®ã‹ï¼Ÿ ã¨ã„ã†ã®ã‚’一ã¤ä¸€ã¤èª¿ã¹ã¦ã¿ã¾ã—ãŸã€‚ ã„ã‚ゆる「触ã£ã¦ã¿ãŸç³»ã€ã®è¨˜äº‹ãªã®ã§ ã ã„ã¶æµ…ã„æ„Ÿã˜ã§ã™ã€‚ 大分
1
ランã‚ング
ランã‚ング
ランã‚ング
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
{{#tags}}- {{label}}
{{/tags}}