Ultimate Guide to Python Debugging
Even if you write clear and readable code, even if you cover your code with tests, even if you are very experienced developer, weird bugs will inevitably appear and you will need to debug them in some way. Lots of people resort to just using bunch of print statements to see what's happening in their code. This approach is far from ideal and there are much better ways to find out what's wrong with
ã€ç¬¬21回Elasticsearch勉強会】aws環境ã«åˆã‚ã›ã¦elastic stackã‚’ãƒã‚°åˆ†æžåŸºç›¤ã¨ã—ã¦æ§‹ç¯‰ã—ãŸè©±
7. 7 × 全体ã®ã‚¢ãƒ¼ã‚テクãƒãƒ£ S3 Bucket ・ ・ ・ ・ ・ ・ ECS Cluster input s3 input s3 /log_a /log_z Log A Elasticsearch Cluster Log Z logstash container logstash container Elasticsearch01 Elasticsearch02 Elasticsearch03 Kibana01 Kibana02 HTTPS @Tokyo output elasticsearch output elasticsearch 8. 8 × 全体ã®ã‚¢ãƒ¼ã‚テクãƒãƒ£ S3 Bucket ・ ・ ・ ・ ・ ・ ECS Cluster input s3 input s3 /log_a /log_z Log A Elasticsearch Cluster Log Z logst
2種類ã®ãƒã‚°è§£æžåŸºç›¤ - wyukawa's diary
僕ã¯ä»•äº‹ã§ã¯2種類ã®ãƒã‚°è§£æžåŸºç›¤ã‚’見ã¦ã„ã¾ã™ã€‚ 1ã¤ç›®ã¯ã©ã¡ã‚‰ã‹ã¨ã„ã†ã¨ã‚¨ãƒ³ã‚¸ãƒ‹ã‚¢ã‚ˆã‚Šã®è§£æžåŸºç›¤ã§ã‚µãƒ¼ãƒ“スå´ã®ã‚¨ãƒ³ã‚¸ãƒ‹ã‚¢ãŒShib, ShibUIを通ã—ã¦å¥½ãã«ã‚¯ã‚¨ãƒªã‚’投ã’ã‚‹ã“ã¨ãŒã§ãã¾ã™ã€‚ãŸã ã—tableã‚’createã—ãŸã‚Šdropã—ãŸã‚Šinsertã—ãŸã‚Šã¯ã§ãã¾ã›ã‚“。selectã®ã¿ã§ã™ã€‚データã®æ›´æ–°ä½œæ¥ã¯åˆ¥é€”cronã®hive batchã§è¡Œã„ã¾ã™ã€‚データã¯Fluentd経由ã§å„サービスã®ã‚µãƒ¼ãƒãƒ¼ã‹ã‚‰åŽé›†ã—ã¾ã™ã€‚ã“ã£ã¡ã®ã‚·ã‚¹ãƒ†ãƒ ã¯å¤ãã‹ã‚‰ã‚ã£ã¦åƒ•ã¯å¼•ã継ã„ã ã ã‘ãªã®ã§è¦‹ã¦ã„ã‚‹ã¨ã¯ã„ã£ã¦ã‚‚ãã‚“ãªã«ã‚„ã‚‹ã“ã¨ã¯ç„¡ã„ã§ã™ã—ã€èªžã‚Œã‚‹ã“ã¨ã‚‚å°‘ãªã„ã§ã™ã€‚ 2ã¤ç›®ã¯ç´„1å¹´å‰ã«åƒ•ãŒä¸€ã‹ã‚‰æ§‹ç¯‰ã—ãŸã‚·ã‚¹ãƒ†ãƒ ã§ãƒ—ランナーよりã®ã‚·ã‚¹ãƒ†ãƒ ã«ãªã£ã¦ã¾ã™ã€‚僕ã®ãƒãƒ¼ãƒ 内ã®ã‚¨ãƒ³ã‚¸ãƒ‹ã‚¢ã ã‘ãŒrawデータを触ã£ãŸã‚Šæ›´æ–°ã—ãŸã‚Šã™ã‚‹ã“ã¨ãŒã§ãã¦ã€ãƒ—ランナーã¯ãƒ¬ãƒãƒ¼ãƒˆã‚’通ã—ã¦åŠ å·¥ã•ã‚ŒãŸãƒ‡ãƒ¼ã‚¿ã‚’見る形ã«ãªã‚Šã¾ã™ã€‚ãªã®ã§1ã¤ç›®ã®ã‚·ã‚¹
地味ã§ã¤ã¾ã‚‰ãªã„ãƒã‚°åŽé›†ã‚’ãŠã‚‚ã—ã‚ãŠã‹ã—ã! 最強ãƒã‚°ã‚³ãƒ¬ã‚¯ã‚¿ã€ŒFluentdã€ã®ãƒã‚«ãƒ©
EnterpriseZine（エンタープライズジン）編集部ã§ã¯ã€æƒ…å ±ã‚·ã‚¹ãƒ†ãƒ æ‹…å½“ã€ã‚»ã‚ュリティ担当ã®æ–¹ã€…å‘ã‘ã«ã€EnterpriseZine Dayã€Security Online Dayã€DataTechã¨ã„ã†ã€3ã¤ã®ã‚¤ãƒ™ãƒ³ãƒˆã‚’開催ã—ã¦ãŠã‚Šã¾ã™ã€‚ãã‚Œãžã‚Œç·¨é›†éƒ¨ç‹¬è‡ªã®åˆ‡ã‚Šå£ã§ã€æ¥ç•Œãƒˆãƒ¬ãƒ³ãƒ‰ã‚„最新事例を網羅。最新ã®å‹•å‘を知るã“ã¨ãŒã§ãã‚‹å ´ã¨ã—ã¦ã€å¥½è©•ã‚’å¾—ã¦ã„ã¾ã™ã€‚
開発メモ#6 : ãƒã‚°ã®å–り扱ㄠ: GrowthForecast, Amazon S3, Treasure Data ã§å¿ƒåŠ´ã‚¼ãƒ - naoyaã®ã¯ã¦ãªãƒ€ã‚¤ã‚¢ãƒªãƒ¼
開発メモ#6 ã§ã™ã€‚å‰å›žã‹ã‚‰å°‘ã—é–“ãŒã‚ã„ã¦ã—ã¾ã„ã¾ã—ãŸã€‚ 開発メモ#2 : AWS ã§ã®ãƒ›ã‚¹ãƒˆ / クラウドãƒã‚¤ãƒ†ã‚£ãƒ–ãªãƒ‡ãƒ—ãƒã‚¤ - naoyaã®ã¯ã¦ãªãƒ€ã‚¤ã‚¢ãƒªãƒ¼ ã§æ›¸ã„ãŸã‚ˆã†ã«ã€EC2 ã¸ã®ã‚¢ãƒ—リケーションã®ãƒ‡ãƒ—ãƒã‚¤ã«ã‚ãŸã£ã¦ã¯ Elastic IP ã®åˆ©ç‚¹ã‚’æ´»ã‹ã—ã¦ã‚«ã‚¸ãƒ¥ã‚¢ãƒ«ã«ãƒ›ã‚¹ãƒˆã‚’入れ替ãˆã¾ãã£ã¦ã„ã¾ã™ã€‚ã¡ã‚‡ã£ã¨ã“ã®ãƒ‡ãƒ—ãƒã‚¤ã¯æ…Žé‡ã«ãªã‚ŠãŸã„ãªã€ã¨æ€ã£ãŸã‚‰ã‚¹ãƒŠãƒƒãƒ—ショットã‹ã‚‰ã‚¤ãƒ³ã‚¹ã‚¿ãƒ³ã‚¹ã‚’ç«‹ã¡ä¸Šã’ã¦ã¯åˆ‡ã‚Šæ›¿ãˆã‚‹ã€ã®ç¹°ã‚Šè¿”ã—。 ã“ã®é‹ç”¨ã‚’ã—ã¦ã„ã‚‹ã¨ã€ã‚¹ãƒŠãƒƒãƒ—ショットã¨ã®å·®åˆ†ãŒã§ãã‚„ã™ã„ã®ã¯ chef-solo ã§å¸åŽã™ã‚‹ã¨ã„ã†ã®ãŒå‰å›žã€å‰ã€…回ã®ã¯ãªã—。 ã‚‚ã†ä¸€ç‚¹å•é¡ŒãŒã‚ã‚Šã¾ã™ã€‚アクセスãƒã‚°ã‚„アプリケーションã®ãƒã‚°ã§ã™ã€‚フãƒãƒ³ãƒˆã‚¨ãƒ³ãƒ‰ã®ã‚µãƒ¼ãƒã‚’ã‚ã£ã¡ã“ã£ã¡åˆ‡ã‚Šæ›¿ãˆã¦ã„ã‚‹ã†ã¡ã«ã€ãã®ã¾ã¾ã§ã¯ãƒã‚°ãŒåˆ†æ–ã•ã‚Œã¦ã—ã¾ã†ã€‚ホストを Terminate ã—よã†ã‚‚ã®ãªã‚‰ãƒã‚°ã¯æ¶ˆå¤±ã—ã¦ã—ã¾ã„ã¾ã™ã€‚ ã“ã®
çµ±åˆãƒã‚°ç®¡ç†åŸºç›¤ã¨ã—ã¦ã®Fluentdを試ã—ã¦ã¿ã¾ã—ãŸã€‚
先日ã€æœã”飯を家ã§é£Ÿã¹ã¦ããŸã«ã‚‚é–¢ã‚らãšã€é€šå‹¤é€”ä¸ã®é§…ã®ã‚«ãƒ¬ãƒ¼å±‹ã•ã‚“ã®åŒ‚ã„ã«èª˜æƒ‘ã•ã‚Œã€ æœã‚«ãƒ¬ãƒ¼ã—ã¾ã—ãŸï¼å‘¨ã‚Šã®ãƒ¡ãƒ³ãƒãƒ¼ã«ã¯ã“ã®å¹¸ã›ãŒã¾ã£ãŸã響ã‹ãªã‹ã£ãŸã®ãŒæ®‹å¿µã§ã™ã€‚ アライドアーã‚テクツã®å”¯ä¸€ã®ã‚¤ãƒ³ãƒ•ãƒ©åŸºç›¤ã‚¨ãƒ³ã‚¸ãƒ‹ã‚¢ã®å¹³é‡Žã§ã™ã€‚ 「ã‹ã‚‰ã‚ã’æœã‚«ãƒ¬ãƒ¼ã€ã¨ã„ã†ãƒ¡ãƒ‹ãƒ¥ãƒ¼ã§ã—ãŸã€‚ ã•ã¦ä»Šå›žã®ãŠé¡Œã¯ã€ã‚¤ãƒ³ãƒ•ãƒ©ç•Œéšˆã§ç››ã‚Šä¸ŠãŒã‚Šã‚’見ã›ã¦ã„ã‚‹Fluentdã¨ã„ã†æŠ€è¡“ã«ã¤ã„ã¦ã§ã™ã€‚ ç§ã‚‚ã‚‚ã‚Œãªãã“ã®æŠ€è¡“ã«æ³¨ç›®ã—ã€å…ˆæ—¥ã‚‚Fluentd Meetup in Japan #2 ã«å‚åŠ ã•ã›ã¦ã„ãŸã ã„ãŸã‚Šã€ 自社ã®ã‚·ã‚¹ãƒ†ãƒ åˆå®¿ã§ã€å‘¨ã‚Šã®ãƒ¡ãƒ³ãƒãƒ¼ãŒç²›ã€…ã¨ãƒ—ãƒã‚°ãƒ©ãƒ ã‚’ã—ã¦ã„る横ã§Fluentdã‚’ã„ã˜ã‚Šå€’ã—ã¦ã¾ã—ãŸã€‚ ◇背景 昨今ビッグデータã€ãƒ“ッグデータã¨æ³¨ç›®ã•ã‚Œã€Webサービスã«ãŠã‘るユーザã®è¡Œå‹•è§£æžã€ å³æ™‚性ã®ã‚るマーケティングデータã®æŠ½å‡ºè¦æœ›ãŒã‚·ã‚¹ãƒ†ãƒ ã«èª²ã›ã‚‰ã‚Œã¾ã™ã€‚ NoSQLã¨å‘¼ã°ã‚Œã‚‹å¤§é‡ãƒ‡ãƒ¼ã‚¿ã‚’分散処ç†ã«
fluent-agent-lite 㨠td-agent ã§ã€å°ã•ãã¯ã˜ã‚ã‚‹ fluentd - Studio3104::BLOG.new
fluentdを使ã£ã¦ã¿ãŸã„ã‘ã©ã€ã€ŒJSONã§ã‚·ãƒªã‚¢ãƒ©ã‚¤ã‚ºã—ãªãã¦ã„ã„ã®ã«ãƒ»ãƒ»ãƒ»ç”Ÿã§ã„ã„ã®ã«ãƒ»ãƒ»ãƒ»ã€ã¨æ€ã£ã¦ãªã‹ãªã‹ä½¿ã„出ã›ãªã„ã¨ã„ã†ã‚±ãƒ¼ã‚¹ã¯ã¾ã¾ã‚ã‚‹ã®ã§ã¯ãªã„ã§ã—ょã†ã‹ã€‚ ã“ã‚“ãªã¨ãã«å›°ã£ã¦ã—ã¾ã†ã‹ã‚‰ã§ã™ã‚ˆã。 rsyncã‚„scpã§æ¯Žæ—¥æ·±å¤œã«ã‚„ã£ã¦ãる生ãƒã‚°ã‚’解æžã™ã‚‹ã‚¹ãƒ‘ゲッティスクリプトãŸã¡ã‚’使ãˆãªããªã£ã¦ã—ã¾ã† アプリケーションサーãƒã«ãƒã‚°ã‚’パースã•ã›ã‚‹ãŸã‚ã®è² è·ã‚’ã‹ã‘ãŸããªã„ ãã‚Œã§ã‚‚使ã£ã¦ã¿ãŸã„ã€ç¾å˜ã®å¤è‡ã„解æžæ©Ÿæ§‹ã‚’アクティブã«ã—ãŸã¾ã¾ã€å¾ã€…ã«fluentdã«ã‚ˆã‚‹å…ˆé‹çš„ãªãƒã‚°è§£æžã‚’始ã‚られãŸã‚‰ã„ã„ãªã¨æ€ã£ã¦ã„る方〠fluent-agent-lite 㨠td-agent ã§ã€fluentd ã‚’å°ã•ãã¯ã˜ã‚ã¦ã¿ãŸã‚‰ã„ã„ã¨æ€ã„ã¾ã™ã€‚ çµè«–ã‚’å…ˆã«è¨€ã†ã¨ã€fluent-agent-lite + fluent-plugin-file-alternative + fluent-plugi
Fluentd meetup #2
2. 自己紹介 • @mikeda – インフラエンジニア – Fluentdæ´3ヶ月 • 会社：CROOZ – モãƒã‚¤ãƒ«ãƒ¡ã‚¤ãƒ³ã®WEBサービス – ブãƒã‚°ã¨ã‹ã‚½ãƒ¼ã‚·ãƒ£ãƒ«ã‚²ãƒ¼ãƒ ã¨ã‹ – サーãƒ450å°ãらㄠ• 最近個人的ã«ä½œã£ãŸã‚‚㮠– 『ã–ã³ãŸã‚“ウィジェット〠– ã‚ã‚“ã¾ã‚Šå響ãŒ(´・ω・｀) 2 4. Fluentdã¨TreasureDataã«ã¤ã„㦠• Fluentd – æ§‹é€ åŒ–ã•ã‚ŒãŸãƒ‡ãƒ¼ã‚¿ – プラグインã«ã‚ˆã‚‹é«˜ã„自由度 – リアルタイム性 →データストリームを統åˆç®¡ç†ã™ã‚‹åŸºç›¤ • TreasureData – TreasureData .inc – クラウドãªHadoop（Hive） – Fluentdã‹ã‚‰ç°¡å˜ã«ãƒ‡ãƒ¼ã‚¿ã‚’投入ã§ãã‚‹ 4 5. 今やã£ã¦ã‚‹ã“㨠グラフ＆ä¿å˜ï¼ˆæ¤œç´¢/集計） • アクセスãƒã‚°ï¼š2å„„/day – グラフ：PVã€ãƒ¬ã‚¹ãƒãƒ³ã‚¹ã‚¿ã‚¤ãƒ ã€é…延件数（アラートè¨å®šï¼‰
#fluentd 㧠maillog ã‚’èªã¿è¾¼ã‚“㧠MongoDB ã«æŠ•å…¥ - 酒日記 ã¯ã¦ãªæ”¯åº—
MTA ãŒåã maillog ã¯æ™®æ®µã‚ã¾ã‚Šè¦‹ãªã„ã®ã ã‘ã©ã€ãƒˆãƒ©ãƒ–ルãŒã‚ã£ãŸã¨ãã«ã¯å¤§å¤‰é‡è¦ã€‚ã“れも Mongo ã«å…¥ã‚Œã‚Œã°ã€å•ã„åˆã‚ã›ãŒã‚ã£ãŸã‚¢ãƒ‰ãƒ¬ã‚¹ã§æ¤œç´¢ã—ã¦ãƒã‚°ã‚’管ç†ç”»é¢ã§è¦‹ã‚‹ã¨ã‹ã§ãã¦ä¾¿åˆ©ï¼ã¨ã„ã†ã“ã¨ã§ã‚„ã£ã¦ã¿ãŸã€‚ # fluentd.conf <source> type tail path /var/log/maillog tag maillog format /^(?<date>[^ ]+) (?<host>[^ ]+) (?<process>[^:]+): (?<message>((?<key>[^ :]+)[ :])? ?((to|from)=<(?<address>[^>]+)>)?.*)$/ </source>æ£è¦è¡¨ç¾ãŒãªã‹ãªã‹ã§ã™ãŒã€ã“れ㧠maillog ã‚’ parse ã—ã¦ä»¥ä¸‹ã®ã‚ˆã†ãªç”Ÿãƒã‚°ã‹ã‚‰ 2012-03-26T19:49:56+09:00 worker00
イベントãƒã‚°åŽé›†ãƒ„ール fluent ãƒªãƒªãƒ¼ã‚¹ï¼ - Blog by Sadayuki Furuhashi
ã“ã‚“ã«ã¡ã¯ã€‚Treasure Data ã®å¤æ©‹ã§ã™^^; 先日㮠Treasure Data, Inc. 壮行会 ã§ã€ã‚¤ãƒ™ãƒ³ãƒˆãƒã‚°åŽé›†ãƒ„ール fluent をリリースã—ã¾ã—ãŸï¼ Fluent event collector fluent 㯠syslogd ã®ã‚ˆã†ãªãƒ„ールã§ã€ã‚¤ãƒ™ãƒ³ãƒˆãƒã‚°ã®è»¢é€ã‚„集約をã™ã‚‹ãŸã‚ã®ã‚³ãƒ³ãƒ‘クトãªãƒ„ールã§ã™ã€‚ ãŸã syslogd ã¨ã¯ç•°ãªã‚Šã€ãƒã‚°ãƒ¡ãƒƒã‚»ãƒ¼ã‚¸ã« テã‚ストã§ã¯ãªã JSON オブジェクト を使ã„ã¾ã™ã€‚ã¾ãŸ プラグインアーã‚テクãƒãƒ£ を採用ã—ã¦ãŠã‚Šã€ãƒã‚°ã®å…¥åŠ›å…ƒã‚„出力先を簡å˜ã«è¿½åŠ ã§ãã¾ã™ã€‚ Twitterã§ã‚‚話題沸騰ä¸ã§ã™ï¼šã‚¤ãƒ™ãƒ³ãƒˆãƒã‚°åŽé›†ãƒ„ール #fluent 周りã®æœ€è¿‘ã®è©±é¡Œ 背景 「ãƒã‚°ã®è§£æžã€ã¯ã€Webサービスã®å“質å‘上ã®ãŸã‚ã«éžå¸¸ã«é‡è¦ã§ã™ã€‚Apacheã®ã‚¢ã‚¯ã‚»ã‚¹ãƒã‚°ã ã‘ã«é™ã‚‰ãšã€ã‚¢ãƒ—リケーションã‹ã‚‰ãƒ¦ãƒ¼ã‚¶ã®æ€§åˆ¥ã‚„å¹´é½¢ãªã©ã®è©³ã—ã„æƒ…å ±ã‚’é›†ã‚
ウィークリーFluentdユースケースエントリリレーã¾ã¨ã‚（ç¾åœ¨12本ã¾ã§ã€‚） - oranie's blog
ウィークリーFluentdユースケースエントリリレーã®è¨˜äº‹ã‚’ã¾ã¨ã‚ã¾ã™ã€‚ 書ã„ãŸäººã¯http://www.zusaar.com/event/415005ã§æ¬¡ã®äººã«é †ç•ªãŒæ¥ãŸã¨æ•™ãˆã¦ã‚ã’ã¦ä¸‹ã•ã„。 ウィークリーã¨ã‹æ›¸ã„ã¦ã„ã‚‹ã‘ã©ã€æ—©ã書ã‘ãŸã‚‰ãƒãƒ³ãƒãƒ³å›žã—ã¡ã‚ƒã£ã¦ãï¼ã‚ã¨ã€å‚åŠ äººæ•°ãŒæƒ³åƒä»¥ä¸Šã«å¤šã„ã®ã§2人åŒæ™‚ã«ä¾é ¼ã•ã›ã¦é ‚ãã¾ã™ï¼žï¼œ #1 oranie 「tailプラグインã®ä»•æ§˜ã«ã¤ã„ã¦ã€ #2 studio3104 「fluentdã§ã€1ã¤ã®ãƒã‚°ã‹ã‚‰è¤‡æ•°ã®ãƒ¡ãƒˆãƒªã‚¯ã‚¹ã‚’得る。〠#3 shun0102 fluent-plugin-dstatã®ç´¹ä»‹ #4 tnmt fluentdã®out fileプラグインã®ä»•æ§˜ã«ã¤ã„㦠#5 fujiwara fluentdã§è¤‡æ•°ç®‡æ‰€ã‹ã‚‰åŒä¸€ã®ãƒ•ã‚¡ã‚¤ãƒ«ã«å‡ºåŠ›ã™ã‚‹ #6 riywo fluentdã®ãƒ—ラグインã¨ã‹ãƒ¦ãƒ¼ã‚¹ã‚±ãƒ¼ã‚¹ã®è©± #7 kenjiskywalke
ITmedia エンタープライズ：PDæ€è€ƒæ³•ã®åŸºç¤Žã¨æƒ…å ±åŽé›†ï¼ˆãã®2）
Linux環境ã§å•é¡ŒãŒç™ºç”Ÿã—ãŸå ´åˆã€ç®¡ç†è€…ãŒã™ã‚‹ã¹ãã“ã¨ã¯ã€Œãã®åŽŸå› ãŒã©ã“ã«ã‚ã‚‹ã‹ã€ã®æ£ç¢ºãªæŠŠæ¡ã§ã‚る。今回ã¯ã€ç™ºç”Ÿã—ãŸå•é¡Œã«å¯¾ã—åŽŸå› ãŒã©ã“ã«ã‚ã‚‹ã‹ã‚’判別ã™ã‚‹ãŸã‚ã®åŸºæœ¬çš„ãªè€ƒãˆæ–¹ã¨ã€å•é¡Œåˆ¤åˆ¥ã«å¿…è¦ãªæƒ…å ±åŽé›†ã®åŸºç¤Žã«ã¤ã„ã¦è§£èª¬ã—よã†ã€‚ æƒ…å ±åŽé›†ã®ãƒã‚¤ãƒ³ãƒˆ PDã«ãŠã„ã¦ã€å•é¡Œã‚’特定ã™ã‚‹ãŸã‚ã«æƒ…å ±åŽé›†ã¯å¿…è¦ä¸å¯æ¬ ã§ã‚る。実際ã«åŽé›†ã™ã¹ãæƒ…å ±ã¯ã‚±ãƒ¼ã‚¹ã«å¿œã˜ã¦ç•°ãªã‚‹ãŒã€å•é¡Œè‡ªä½“ã«é–¢ã™ã‚‹è¨˜éŒ²ãŒãªã„ã‹ã‚‰ã¨ã„ã£ã¦ã€ä¸è¦ãªæƒ…å ±ã§ã‚ã‚‹ã¨ã¯é™ã‚‰ãªã„ã€‚æƒ…å ±ã®åŽé›†ã¯ã€å•é¡Œãã®ã‚‚ã®ã‚’直接ã«ç‰¹å®šã™ã‚‹ã»ã‹ã€ã‚·ã‚¹ãƒ†ãƒ ã®æ§‹æˆã‚„å•é¡Œç‚¹ã‚’絞り込むãŸã‚ã®è¦ç´ を見ã¤ã‘ã‚‹ãŸã‚ã«ã‚‚å¿…è¦ã§ã‚る。ãã®ã“ã¨ã‚’èªè˜ã—ã¦ã€æƒ…å ±åŽé›†ã‚’è¡Œã£ã¦ã„ãŸã ããŸã„。 Linuxã§å–å¾—ã§ãã‚‹æƒ…å ±ã«ã¯ã€OSやユーザープãƒã‚»ã‚¹ã®ç¨¼åƒã«é–¢ã™ã‚‹ã‚‚ã®ã¨ã€ãƒãƒ¼ãƒ‰ã‚¦ã‚§ã‚¢é–¢é€£ã®æ§‹æˆã«é–¢ã™ã‚‹ã‚‚ã®ãŒã‚る。ã¾ãŸã€ãƒãƒ¼ãƒ‰ã‚¦ã‚§ã‚¢ã®ç¨¼åƒã«é–¢ã™ã‚‹æƒ…å ±ã¯BIOSã‹ã‚‰ç›´æŽ¥å–å¾—ã™ã‚‹ã»ã‹ã€æœ€è¿‘ã®IA
klogd - Linuxã®å‚™å¿˜éŒ²ã¨ã‹ãƒ»ãƒ»ãƒ»(目次ã¸ï¼‰
ãƒã‚°ãƒ•ã‚¡ã‚¤ãƒ«ã¨ãƒã‚®ãƒ³ã‚°ã®ä»•çµ„ã¿ã®klogdã«ã¤ã„ã¦è¨˜äº‹ã‚’èªã‚“ã§ã€æˆã‚‹ç¨‹ã€‚ã¨ã„ã†æ€ã„出ã§ã—ãŸã€‚ãれをè¸ã¾ãˆã¦ã“ã®è¨˜äº‹ã‚’アップã—ã¾ã™ã€‚従ã£ã¦å†…容的ã«ã¯å…ˆã®ã‚·ã‚¹ãƒ†ãƒ ãƒã‚°1/システムãƒã‚°2ã®ç„¼ãç›´ã—ã¿ãŸã„ãªã‚‚ã®ã§ã™ã€‚ klogdã¨ã‚«ãƒ¼ãƒãƒ«ã®ãƒã‚°ãƒ‡ãƒ¼ãƒ¢ãƒ³ã¨è¨€ã†äº‹ã§ã€ã‚«ãƒ¼ãƒãƒ«ã‚¹ãƒ¬ãƒƒãƒ‰ã¨æ€ã£ã¦ã—ã¾ã„ãã†ã§ã™ãŒã€ãƒã‚°ãƒ•ã‚¡ã‚¤ãƒ«ã¨ãƒã‚®ãƒ³ã‚°ã®ä»•çµ„ã¿ã®å›³è§£ã®ã‚ˆã†ã«ã€ãƒ¦ãƒ¼ã‚¶ãƒ©ãƒ³ãƒ‰ã‹ã‚‰èµ·å‹•ã•ã‚Œã‚‹ã‚‚ã®ã§ã€ã‚‚ã¡ã‚んユーザプãƒã‚»ã‚¹ã§ã™ã€‚(ãªãŠã€å›³è§£ã§ã¯dmesgã‚‚/proc/kmsgã‹ã‚‰å–å¾—ã™ã‚‹ã‚ˆã†ã«ãªã£ã¦ã„ã¾ã™ãŒã€ç§ã®èª¿ã¹ãŸãƒ¬ãƒ™ãƒ«ã§ã¯dmesgã¯ç›´æŽ¥ãƒªãƒ³ã‚°ãƒãƒƒãƒ•ã‚¡ã‹ã‚‰å–å¾—ã—ã¦ã„るよã†ã§ã™ã€‚） /proc/kmsgã‹ã‚‰èªã¿å‡ºã™ã¨ã€do_syslog()ã‚’type=2ã§ã‚³ãƒ¼ãƒ«ã—ã¦ã„ã¾ã—ãŸã€‚ãã®å‡¦ç†ã¯log_start - log_end=0ãªã‚‰ã€log_waitã‚ューã§ã‚¦ã‚¨ã‚¤ãƒˆã•ã›ã¦ã„ã¾ã—ãŸã€‚ DECLARE_WAIT_QU
fluentdã§ã€1ã¤ã®ãƒã‚°ã‹ã‚‰è¤‡æ•°ã®ãƒ¡ãƒˆãƒªã‚¯ã‚¹ã‚’得る。 - Studio3104::BLOG.new
ウィークリーFluentdユースケースエントリリレーã®è¨˜äº‹ã§ã™ã€‚ 「1ã¤ã®ãƒã‚°ã‹ã‚‰è¤‡æ•°ã®ãƒ¡ãƒˆãƒªã‚¯ã‚¹ã‚’å¾—ã‚‹ã€ã¨ã„ã†ç›®çš„主眼ã®è¨˜äº‹ã§ã™ã€‚ å„プラグインã®ä»•æ§˜ã‚„紹介ã—ã¦ã„ãªã„オプションã«ã¤ã„ã¦ã¯ã€ä»–ã®æ–¹ãŒæ›¸ã‹ã‚Œã‚‹è¨˜äº‹ã‚„ã€ä½œè€…様ã®ãƒ–ãƒã‚°ã‚„GitHubã‚’ã”å‚ç…§ãã ã•ã„。 WEBã®ãƒ¬ã‚¹ãƒãƒ³ã‚¹ã‚¿ã‚¤ãƒ をグラフ化ã™ã‚‹ fluentd casual talks ã§ã€fujiwaraã•ã‚“ãŒç™ºè¡¨ã•ã‚ŒãŸfluentdã§Webサイトé‹ç”¨ã‚’楽ã«ã™ã‚‹ãŒãã£ã‹ã‘ã§ã€WEBã®ãƒ¬ã‚¹ãƒãƒ³ã‚¹ã‚¿ã‚¤ãƒ ã‚’å¯è¦–化ã—始ã‚ãŸæ–¹ã€å¤šã„ã¨æ€ã„ã¾ã™ã€‚ (ã‹ãªã‚Šæ¥µç«¯ãªä¾‹ã§ã™ãŒ)ã“ã‚“ãªãµã†ã«ã‚°ãƒ©ãƒ•ãŒå‡ºã‚‹ã“ã¨ã«ã‚ˆã£ã¦ã€ã€Œ14:30é ƒã‹ã‚‰ãƒ¬ã‚¹ãƒãƒ³ã‚¹ãŒè‘—ã—ã悪ããªã£ã¦ã„ã‚‹ï¼ã€ã¨ã„ã†ã“ã¨ãŒè¦‹ã¦å–れるよã†ã«ãªã‚Šã¾ã™ã€‚ ã“ã‚Œã«ã‚ˆã£ã¦"14:30ã‹ã‚‰é…ã„å¿œç”ãŒå¢—ãˆå§‹ã‚ãŸ"ã¨ã„ã†ã“ã¨ã¯ã‚ã‹ã‚‹ã‚ˆã†ã«ãªã‚‹ã®ã§ã™ãŒã€ã€Œã˜ã‚ƒã‚ã©ã“ãŒé…ã„ã®ï¼Ÿã€ã¨ãªã£ã¦çµå±€ç”Ÿã®ãƒã‚°ã‚’æ¼ã£ãŸã‚Šã™ã‚‹
ãƒã‚°è§£æžã‚’支ãˆã‚‹NoSQLã®æŠ€è¡“
2. 自己紹介 •  å·ä¸Š çŸ¥æˆ â€¢â€¯ @tomofusa •  æ ªå¼ä¼šç¤¾ãƒ‰ãƒªã‚³ãƒ •  ソーシャルゲーム事æ¥æœ¬éƒ¨ •  ICTデザイン部 ICTグループ長 •  ソーシャルゲーム開発を経㦠–  アーã‚テクトグループã®ãƒžãƒã‚¸ãƒ¡ãƒ³ãƒˆ 12/02/20 © Drecom Co.,Ltd. All rights Reserved 2
Web上ã§ã‚·ã‚¹ãƒ†ãƒ ãƒã‚°ã®é–²è¦§ã€ç›£è¦–·Clarity MOONGIFT
Clarityã¯Ruby製ã®ã‚ªãƒ¼ãƒ—ンソース・ソフトウェア。システムã®ãƒã‚°ã‚’見る際ã«ã¯SSHを使ã£ã¦ã‚µãƒ¼ãƒã«ãƒã‚°ã‚¤ãƒ³ã—ã¦ç¢ºèªã™ã‚‹ã¨ã„ã†ã®ãŒä¸€èˆ¬çš„ã 。ã ãŒä½•å°ã‚‚ã‚るサーãƒã«å€‹ã€…ã«ãƒã‚°ã‚¤ãƒ³ã™ã‚‹ã®ã¯é¢å€’ã 。社内ã®ã‚µãƒ¼ãƒã§ã‚ã‚Œã°ã€ã‚»ã‚ュリティ的ã«ã‚‚厳ã—ã„制é™ãŒãªã„ã“ã¨ã‚‚多ã„。 ãã“ã§ä½¿ã£ã¦ã¿ãŸã„ã®ãŒWebブラウザベースã§ä½¿ãˆã‚‹ãƒã‚°ç›£è¦–ツールã 。Clarityã¯ã‚µãƒ¼ãƒä¸Šã§å®Ÿè¡Œã™ã‚‹ã“ã¨ã§Webブラウザ上ã§ãƒã‚°é–²è¦§ã‚’è¡Œãˆã‚‹ã€‚監視ã—ãŸã„ãƒã‚°ã®ç¨®é¡žã‚‚è¨å®šã§ãã‚‹ã®ã§ã€å¤šæ•°ã®ã‚µãƒ¼ãƒã‚’管ç†ã™ã‚‹ä¸Šã§ä¾¿åˆ©ã«ä½¿ãˆã‚‹ã‹ã‚‚知れãªã„。 モードã¯äºŒã¤ã‚り検索ã¨Tailã«ãªã£ã¦ã„る。検索ã¯æŒ‡å®šã—ãŸãƒã‚°ãƒ•ã‚¡ã‚¤ãƒ«ã‹ã‚‰å…¥åŠ›ã—ãŸæ¤œç´¢ãƒ¯ãƒ¼ãƒ‰ã‚’ãƒã‚§ãƒƒã‚¯ã—ã€ä¸€è¦§ã§çµæžœã‚’表示ã™ã‚‹ã€‚Tailã¯ã¾ã•ã«æ›´æ–°ã•ã‚Œã‚‹ãŸã³ã«è¡¨ç¤ºãŒè¿½åŠ ã•ã‚Œã‚‹Tailã 。自動スクãƒãƒ¼ãƒ«ã‚’有効ã«ã™ã‚Œã°è‡ªå‹•çš„ã«ã‚¹ã‚¯ãƒãƒ¼ãƒ«ã—ã¦è¡¨ç¤ºãŒæ›´æ–°ã•ã‚Œã‚‹ã‚ˆã†ã«ãªã‚‹ã€‚ 背景ã¯é»’ã€æ–‡å—ã¯ç™½ã§ã‚¿ãƒ¼ãƒŸãƒŠ
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
Log Pattern Recognition: LogMine
Fluentd
fluentd を利用ã—ãŸå¤§è¦æ¨¡ã‚¦ã‚§ãƒ–サービスã®ãƒã‚®ãƒ³ã‚°
Fluent event collector
{{#tags}}- {{label}}
{{/tags}}