Frequently Asked Questions | FluentdFluentd is an open source data collector for building the unified logging layer. Once installed on a server, it runs in the background to collect, parse, transform, analyze and store various types of data.
Amazon Elasticsearch Serviceを使ã£ãŸãƒã‚°åŽé›†åŸºç›¤ã®æ§‹æˆã‚’考ãˆã¦ã¿ãŸ
アジャイル開発ã«å–り組むãƒãƒ¼ãƒ å‘ã‘ã®ã‚³ãƒ¼ãƒãƒ³ã‚°ã‚„ã€æŠ€è¡“顧å•ã€èªå®šã‚¹ã‚¯ãƒ©ãƒ ãƒžã‚¹ã‚¿ãƒ¼ç ”ä¿®ãªã©ã®å„種トレーニングをæä¾›ã—ã¦ã„ã¾ã™ã€‚ãœã²ãŠæ°—軽ã«ã”相談ãã ã•ã„（åˆå›žç›¸è«‡ç„¡æ–™ï¼‰ ã¿ãªã•ã‚“ã“ã‚“ã«ã¡ã¯ã€‚@ryuzeeã§ã™ã€‚ 6月10æ—¥ã«Amazon Web Servicesä¼æ¥å°Žå…¥ã‚¬ã‚¤ãƒ‰ãƒ–ックãŒç™ºå£²ã«ãªã£ã¦ã„ã¾ã™ã®ã§ã‚ˆã‚ã—ããŠé¡˜ã„ã—ã¾ã™ã€‚ ã•ã¦ä»Šå›žã¯AWS上ã§ãƒã‚°åŽé›†ã¨åˆ†æžã‚’ã™ã‚‹éš›ã«ã€Amazon Elasticsearch Serviceを使ã†å‰æã¨ã—ãŸå ´åˆã ã¨ã©ã®ã‚ˆã†ãªæ§‹æˆæ¡ˆãŒã‚ã‚Šãã†ã‹ã„ãã¤ã‹è€ƒãˆã¦ã¿ãŸã®ã§ã”紹介ã—ã¾ã™ã€‚ ãªãŠã€æ¤œè¨Žã®ææ–™ã«ã—ã¦ã„る全体ã®æ§‹æˆã¨ã—ã¦ã¯ã€è¤‡æ•°ã®VPC(ã¾ãŸã¯AWSアカウント)ãŒã‚ã£ã¦ã€ã•ã‚‰ã«ã‚ªãƒ³ãƒ—レå´ã¨Direct Connectã‚„Internet VPNã§æŽ¥ç¶šã—ã¦ã„るよã†ãªã€ã‚ˆãã‚ã‚‹ãã‚Œãªã‚Šã®è¦æ¨¡ã®æ§‹æˆã«ãªã‚Šã¾ã™ã€‚ å„VPCã®ä¸ã«ã¯è¤‡æ•°ã®ã‚µãƒ–ãƒãƒƒãƒˆãŒã‚ã‚Šã€ãã®ã†ã¡ã®
Treasure Data Update 2015 | Post Moratorium
Treasure Data Update 2015 皆様ã“ã‚“ã«ã¡ã¯ã€‚トレジャーデータã§CTOã‚’ã—ã¦ã¾ã™å¤ªç”°ã§ã™ã€‚Treasure Data Advent Calendar 1日目ã§ã¯ã€2015å¹´ã®æŒ¯ã‚Šè¿”ã‚Šã‚’ã—ã¦è¦‹ãŸã„ã¨æ€ã„ã¾ã™ã€‚ 会社今年ã¯å€‹äººçš„ã«ã¯ã¨ã«ã‹ã採用ã«æ™‚間を費やã—ãŸå¹´ã§ã—ãŸã€‚2014å¹´ã®12月ã«Series Bã®å¢—資をã—ãŸå¾Œã€ç´„40åã‹ã‚‰ç´„100åã¾ã§æŽ¡ç”¨ã‚’è¡Œã„ã¾ã—ãŸã€‚ エンジニアã¯ã‚‚ã¡ã‚ã‚“ã€ã‚»ãƒ¼ãƒ«ã‚¹ãƒ»ãƒžãƒ¼ã‚±ãƒ»ãƒ—ãƒãƒ€ã‚¯ãƒˆãƒ»BDãªã©ä¼šç¤¾ã¨ã—ã¦å¿…è¦ãªã‚らゆるãƒã‚¸ã‚·ãƒ§ãƒ³ãŒæ‹¡å……ã•ã‚Œã¾ã—ãŸã€‚特ã«CFOãŒåŠ å…¥ã—ãŸäº‹ã§ã€ä¼šç¤¾åŸºç›¤ãŒå®Œå…¨ã«æ¬¡ã®ãƒ¬ãƒ™ãƒ«ã«å…¥ã£ãŸå®Ÿæ„ŸãŒæœ‰ã‚Šã¾ã™ã€‚ 地域ã§è¦‹ã‚‹ã¨USãŒç´„55åã€æ—¥æœ¬ãŒç´„40åã€éŸ“国 (今年ã®1月ã«ãŠåº—é–‹ã) ãŒ3åã¨ã„ã£ãŸã‚ˆã†ãªå†…訳ã«ãªã£ã¦ã„ã¾ã™ã€‚エンジニアãŒç´„30%・セールス & ・マーケティングãŒç´„60%ã¨ã„ã†äº‹ã§ã€4å¹´ç›®ã®B2B SaaSスタートア
Terraform + fluentd + Docker + Puree ã§å°ã•ã始ã‚るモãƒã‚¤ãƒ«è¡Œå‹•ãƒã‚°åŽé›†åŸºç›¤æ§‹ç¯‰ | PSYENCE:MEDIA
Terraform + fluentd + Docker + Puree ã§å°ã•ã始ã‚るモãƒã‚¤ãƒ«è¡Œå‹•ãƒã‚°åŽé›†åŸºç›¤æ§‹ç¯‰ æ²³åˆ èˆªå¹³ 2015.07.07 1273 194192628259 ã“ã‚“ã«ã¡ã¯ã€‚ 4月ã‹ã‚‰æ–°å’駆ã‘出ã—インフラエンジニアã¨ã—ã¦æ—¥ã€…奮闘ã—ã¦ãŠã‚Šã¾ã™æ²³åˆã§ã™ã€‚ "モãƒã‚¤ãƒ«è¡Œå‹•ãƒã‚°åŽé›†åŸºç›¤" ã‚’ "å°ã•ã" 始ã‚ãŸã®ã§ã€ä»¥ä¸‹ã«ã‚¤ãƒ³ãƒ•ãƒ©æ§‹ç¯‰ã‹ã‚‰ãƒ¢ãƒã‚¤ãƒ«ã¾ã§ã®è¨è¨ˆã¾ã§ã‚’ã¾ã¨ã‚ãŸã„ã¨æ€ã„ã¾ã™ã€‚今回ã“ã®ãƒã‚°åŽé›†åŸºç›¤ã‚’作るã«ã‚ãŸã£ã¦ç§è‡ªèº«ãŒã“ã‚Œã¾ã§çµŒé¨“ã—ãŸã“ã¨ã®ãªã„技術・ツールを利用ã—ã¾ã—ãŸã®ã§ã€ãれらã®å°Žå…¥ã«ã¤ã„ã¦ã‚‚ã”紹介ã„ãŸã—ã¾ã™ã€‚ å°Žå…¥ã®èƒŒæ™¯ ç§ã¯è‹±å˜èªžã‚µãƒ—リをä¸å¿ƒã«ã‚¤ãƒ³ãƒ•ãƒ©ã‚’担当ã—ã¦ã„ã¾ã™ã€‚ 英å˜èªžã‚µãƒ—リã¨ã¯ã€èžã‘る・話ã›ã‚‹ãƒ»è¦šãˆã¦ã‚‹ã‚’コンセプトã¨ã—ãŸé«˜æ ¡å—験ã‹ã‚‰TOEICã¾ã§å¯¾ç–ã§ãる英å˜èªžå¦ç¿’ã®ã‚µãƒ¼ãƒ“スã§ã™ã€‚ ユーザã®åˆ†æžã«ã‚ˆã使ã‚れるツールã®1ã¤ã«Google Analy
「データ転é€ãƒŸãƒ‰ãƒ«ã‚¦ã‚§ã‚¢å‹‰å¼·ä¼šã€ãƒ¬ãƒãƒ¼ãƒˆ #dtm_meetup | DevelopersIO
ã“ã‚“ã«ã¡ã¯ã€è™Žå¡šã§ã™ã€‚ 1月27æ—¥(ç«)ã«ã€Œãƒ‡ãƒ¼ã‚¿è»¢é€ãƒŸãƒ‰ãƒ«ã‚¦ã‚§ã‚¢å‹‰å¼·ä¼šã€ã«å‚åŠ ã—ã¦ãã¾ã—ãŸã®ã§ãƒ¬ãƒãƒ¼ãƒˆã—ã¾ã™ã€‚イベントã¯ã€SAPジャパンã•ã‚“ã§é–‹å‚¬ã•ã‚Œã¾ã—ãŸã€‚ 今回ã®ãƒ†ãƒ¼ãƒžã¯ã€ã¾ãšã€å½“日リリースã•ã‚ŒãŸã°ã‹ã‚Šã®OSSツールEmbulkã®è§£èª¬ã€æ¬¡ã«ã€ãƒ‡ãƒ¼ã‚¿è»¢é€æ¥ç•Œã®ãƒ‰ãƒ³HULFTã®ç´¹ä»‹ã€ãã—ã¦ã€ä»Šå¹´ãƒªãƒªãƒ¼ã‚¹äºˆå®šã®fluentd v1ã«ã¤ã„ã¦ã€æœ€å¾Œã«ã€HTTP/1ã¨HTTP/2両対応ã®HTTPサーãƒH2Oã®ç´¹ä»‹ã§ã—ãŸã€‚盛りã ãã•ã‚“ã§ã™ã。 懇親会ã§ã¯ãƒˆãƒ¬ã‚¸ãƒ£ãƒ¼ãƒ‡ãƒ¼ã‚¿ã•ã‚“ã‹ã‚‰ãƒ”ザãŒæä¾›ã•ã‚Œã¾ã—ãŸã€‚SAPジャパンã•ã‚“ã€ãƒˆãƒ¬ã‚¸ãƒ£ãƒ¼ãƒ‡ãƒ¼ã‚¿ã•ã‚“ã€ã‚ã‚ŠãŒã¨ã†ã”ã–ã„ã¾ã™ã€‚ データ転é€ãƒŸãƒ‰ãƒ«ã‚¦ã‚§ã‚¢å‹‰å¼·ä¼š - dots.[ドッツ] 「ãƒãƒ«ã‚¯ãƒ‡ãƒ¼ã‚¿ãƒãƒ¼ãƒ‰ãƒ„ール『Embulkã€ãƒªãƒªãƒ¼ã‚¹ 〜 fluentdã®æŸ”軟性ã¨å …牢性をãƒãƒ«ã‚¯ã§ã‚‚〠最åˆã®ã‚»ãƒƒã‚·ãƒ§ãƒ³ã¯ã€ãƒˆãƒ¬ã‚¸ãƒ£ãƒ¼ãƒ‡ãƒ¼ã‚¿ã®å¤æ©‹è²žä¹‹ã•ã‚“ã«ã‚ˆã‚‹Embulkã®æ€æƒ³ã‚„アー
Fluentdã¨ã¯ã©ã®ã‚ˆã†ãªã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ãªã®ã‹ - ãŸã”ã‚‚ã‚Šã™ãƒ¡ãƒ¢
Fluentd ã¨ã„ã†ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ãŒã‚る。日本国内ã§ã¯ãã“ãã“話題ã«ãªã£ã¦ããŸãŒã€ä½•ãŒã§ãã‚‹ã®ã‹ã€ä½•ã«ä½¿ã†ã¨å¬‰ã—ã„ã®ã‹ã€ä½•ã«ä½¿ãˆã‚‹ã®ã‹ã€ã¨ã„ã†ç‚¹ã«ã¤ã„ã¦è©³ç´°ã‚’よã知らãªã„ã¨ã„ã†äººã‚‚ãŠãらãã¾ã 多ã„ã“ã¨ã§ã—ょã†ã€‚ ãªã®ã§ã€ç°¡å˜ã«ã¾ã¨ã‚る。 http://fluentd.org/ ãªãŠä»¥ä¸‹ã®å€‹åˆ¥é …ç›®ã”ã¨ã«æ›¸ã„ã¦ã„ããŒã€ãã®æ‰‹å‰ã«ã¾ã¨ã‚ã‚’ç½®ã„ã¦ãŠãã®ã§å¿™ã—ã„人ã¯ãã‚Œã ã‘èªã‚€ã¨ã‚ˆã„。インストールやè¨å®šã«ã¤ã„ã¦ã¯å°Žå…¥éƒ¨åˆ†ã«ã¤ã„ã¦ã¯æ—¥æœ¬èªžã®è¨˜äº‹ã¯ã‚‚ã†å¤šãã‚ã‚‹ã®ã§ã€è§¦ã‚Œãªã„。 æ¦‚è¦ ã§ãã‚‹ã“㨠ãƒã‚°ã®åŽé›† センサデータç‰ã®åŽé›† 汎用データ処ç†ãƒ—ãƒã‚»ãƒƒã‚µã¨ã—ã¦ é »å‡ºãƒ¦ãƒ¼ã‚¹ã‚±ãƒ¼ã‚¹ ãƒã‚°ã®åŽé›† データã®é›†ç´„ ç°¡å˜ãªãƒªã‚¢ãƒ«ã‚¿ã‚¤ãƒ 集計 ソフトウェアã¨ã—ã¦ã®ç‰¹å¾´ コア プラグイン 安定性 性能 開発体制 コミュニティ ã¶ã£ã¡ã‚ƒã‘ã©ã†ãªã®ï¼Ÿ ã¾ã¨ã‚ ç¾æ™‚点ã§ã€è¤‡æ•°ã®å ´æ‰€ã«åˆ†æ•£ã—ãŸãƒ‡ãƒ¼ã‚¿ã‚„常ã«å¢—ãˆç¶šã‘るデータã®å®‰å…¨ãªè»¢
FluentdãŒKubernetesã®æ¨™æº–ãƒã‚°åŽé›†ãƒ„ールã¨ã—ã¦æŽ¡ç”¨
GoogleãŒã‚ªãƒ¼ãƒ—ンソースã¨ã—ã¦å…¬é–‹ã—ãŸKubernetesã¯ã€ã‚³ãƒ³ãƒ†ãƒŠåž‹ä»®æƒ³åŒ–ソフトウェアã®Dockerを管ç†ã™ã‚‹ãƒ„ールã§ã™ã€‚開発プãƒã‚¸ã‚§ã‚¯ãƒˆã«ã¯Dockerã€RedHatã€IBMã€VMwareã€ãƒžã‚¤ã‚¯ãƒã‚½ãƒ•ãƒˆãªã©å¤šæ•°ã®ä¼æ¥ãŒå‚åŠ ã‚’è¡¨æ˜Žã—ã¦ã„ã¾ã™ã€‚ Kubernetesã¯ã€è¤‡æ•°ã®Dockerコンテナã«ã¾ã¨ã‚ã¦ã‚¢ãƒ—リケーションをデプãƒã‚¤ã—ã€è¨å®šã‚’è¡Œã„ã€ç¨¼åƒçŠ¶æ³ã‚’監視ã€ç®¡ç†ã—ã€ã‚µãƒ¼ãƒ“スã¸ã®ãƒˆãƒ©ãƒ•ã‚£ãƒƒã‚¯ã‚’ルーティングã™ã‚‹ãªã©ã€ã‚¯ãƒ©ã‚¹ã‚¿ã¨ã—ã¦Dockerã‚’é‹ç”¨ã™ã‚‹ãŸã‚ã®å¤šãã®æ©Ÿèƒ½ã‚’å‚™ãˆã¦ã„ã¾ã™ã€‚ ã“ã®Kubernetesã§ä½¿ã‚れる標準ã®ãƒã‚°åŽé›†ãƒ„ールã¨ã—ã¦ã€ã‚ªãƒ¼ãƒ—ンソースã®fluentdãŒæŽ¡ç”¨ã•ã‚ŒãŸã“ã¨ãŒæ˜Žã‚‰ã‹ã«ãªã‚Šã¾ã—ãŸã€‚下記ã¯ãれをä¼ãˆã‚‹Googleä½è—¤æ°ã®ãƒ„イート。 fluentdãŒKubernetesã®æ¨™æº–ãƒã‚°ã‚³ãƒ¬ã‚¯ã‚¿ã«æŽ¡ç”¨ã•ã‚ŒãŸãœï¼ï¼ï¼ https://t.co/V8VDM4IE7e
Googleã®è™Žã®å「BigQueryã€ã‚’FluentdユーザーãŒä½¿ã‚ãªã„ç†ç”±ãŒãªããªã£ãŸç†ç”± #gcpja - Qiita
From Fluentd Meetupã«è¡Œã£ã¦ãã¾ã—㟠ã“れをèªã‚“ã 時ã€BigQueryã®æ¤œç´¢ã‚¹ãƒ”ードã«ã¤ã„ã¦ã¡ã‚‡ã£ã¨è£œè¶³ã—ãŸããªã£ãŸã€‚確ã‹ã«Fluentd Meetupã®ãƒ‡ãƒ¢ã§ã¯9億件を7秒程度ã§æ¤œç´¢ã—ã¦ã„ãŸãŒã€BigQueryã®çœŸã®å®ŸåŠ›ã¯ã“れより1〜2ケタ上ã ã‹ã‚‰ã 。ã¡ã‚‡ã£ã¨æ‰‹å…ƒã§å°‘ã—大ãã‚ã®ãƒ†ãƒ¼ãƒ–ルã§è©¦ã—ã¦ã¿ãŸã‚‰ã€120å„„è¡Œã®æ£è¦è¡¨ç¾ãƒžãƒƒãƒä»˜ã集計ãŒ5秒ã§å®Œäº†ã—ãŸã€‚è«–ã‚ˆã‚Šè¨¼æ‹ ã§ã€ãƒ‡ãƒ¢ãƒ“デオ（1分16秒）を作ã£ã¦ã¿ãŸï¼š From The Speed of Google BigQuery ã“ã‚Œã¯é€Ÿã™ãŽã‚‹ã€‚何ã‹ã®ã‚¤ãƒ³ãƒã‚ã§ã‚る（最åˆã«ãƒ‡ãƒ¢ã‚’見ãŸæ™‚ãã†æ€ã£ãŸï¼‰ã€‚æ£è¦è¡¨ç¾ã‚’ã„ã‚ã„ã‚変ãˆã¦ã¿ã¦ã‚‚スピードã¯å¤‰ã‚らãªã„。ã¤ã¾ã‚Šã€ã‚¤ãƒ³ãƒ‡ãƒƒã‚¯ã‚¹ã‚’事å‰æ§‹ç¯‰ã§ããªã„クエリã«å¯¾ã—ã¦ã“ã®ã‚¹ãƒ”ードãªã®ã§ã‚る。 ä¾¡æ ¼ã‚‚å®‰ã„。ã•ã™ãŒã«120å„„è¡Œã®ã‚¯ã‚¨ãƒªã¯1回ã§200円もã‹ã‹ã£ã¦æ°—軽ã«å®Ÿè¡Œã§ããªã•ãã†ã§ã‚ã‚‹ãŒã€1.2å„„
BigQuery 㨠Google ã® Big Data Stack 2.0 - naoyaã®ã¯ã¦ãªãƒ€ã‚¤ã‚¢ãƒªãƒ¼
先日ã€æœ‰å¿—ã§é›†ã¾ã£ã¦ã€ŒBigQuery Analyticsã€ã¨ã„ã†æ›¸ç±ã®èªæ›¸ä¼šã‚’ã‚„ã£ãŸã€‚ãã®åã®é€šã‚Š Google BigQuery ã«ã¤ã„ã¦æ›¸ã‹ã‚ŒãŸæ´‹æ›¸ã€‚ BigQuery を最近仕事ã§ä½¿ã„始ã‚ãŸã®ã ãŒã€BigQuery ãŒé–‹ç™ºã•ã‚ŒãŸèƒŒæ™¯ã¨ã‹ã‚¢ãƒ¼ã‚テクãƒãƒ£ãƒ¼ã¨ã‹ã‚ã¾ã‚Šèª¿ã¹ã‚‚ã›ãšã«ä½¿ã„始ã‚ãŸã®ã§ä»Šæ›´ãªãŒã‚‰ãã®è¾ºã®ã‚¤ãƒ³ãƒ—ットを増やã—ã¦ä»¥é™ã¨æ€ã£ãŸæ¬¡ç¬¬ã€‚ ãã‚Œã§ã€èªæ›¸ä¼šã®ç¬¬1回目ã¯æ›¸ç±ã®ä¸ã§ã‚‚ Overview ã«ç›¸å½“ã™ã‚‹ã¨ã“ã‚ã‚’ä¸å¿ƒã«èªã¿åˆã‚ã›ã¦ã„ã£ãŸã€‚ãã‚Œã ã‘ã§ã‚‚ãªã‹ãªã‹ã«é¢ç™½ã‹ã£ãŸã®ã§å°‘ã—ブãƒã‚°ã«ã§ã‚‚書ã„ã¦ã¿ã‚ˆã†ã‹ãªã¨æ€ã†ã€‚ BigQuery ã®è©±ãã®ã‚‚ã®ã‚‚é¢ç™½ã„ãŒã€å€‹äººçš„ã«ã¯ Google ã®ã‚¤ãƒ³ãƒ•ãƒ©ãŒæ›¸ç±ã€ŽGoogle を支ãˆã‚‹æŠ€è¡“ã€ã§è§£èª¬ã•ã‚ŒãŸã‚‚ã®ãŒ "Big Data Stack 1.0" ã ã¨ã—ã¦ã€BigQuery 㯠Big Data Stack 2.0 ã®ä¸Šã«æ§‹ç¯‰ã•ã‚Œã¦ãŠã‚Š
Fluentdã¨Riakã®è©± - After Coding
Fluentdã¯ã€Ruby製ã®ãƒã‚°ã‚³ãƒ¬ã‚¯ã‚¿ã 。コードã¯å…¬é–‹ã•ã‚Œã¦ã„る。 様々ãªãƒã‚°ã‚’æ§‹é€ åŒ–ã—ã¦ä¸€å…ƒç®¡ç†ã™ã‚‹ã“ã¨ãŒã§ãã€åŽé›†ã¨è§£æžã¸ã®ãƒãƒ¼ãƒ‰ãƒ«ã‚’大ãã下ã’ã¦ãれる。 インストールもプラグイン開発も簡å˜ã€‚日本語ã®è³‡æ–™ã‚‚多ã„。 ãã®è³‡æ–™ã‚‚様々ã‚ã‚‹ãŒã€ãƒ—ラグインを見るãªã‚‰ã“ã‚ŒãŒæœ€è‰¯ã ã¨æ€ã†ã€‚å¿…è¦ãªæƒ…å ±ãŒã‚ˆãã¾ã¨ã¾ã£ã¦ãŠã‚Šã€å¿…èªã¨ã„ãˆã‚‹ã€‚ Big Data入門ã«è¦‹ã›ã‹ã‘ãŸFluentd入門 from Keisuke Takahashi データã®ç¢ºå®Ÿãªè»¢é€ã‚’実ç¾ã™ã‚‹ãƒãƒƒãƒ•ã‚¡æ©Ÿèƒ½ã«ã¤ã„ã¦ã¯ã€æ± 田大輔ã•ã‚“ã®ãƒ–ãƒã‚°ãŒè©³ã—ã„。ã•ã¦ã€Fluentdã¯ãƒ‡ãƒ¼ã‚¿ã‚’åŽé›†ã—ã¦ãれるãŒã€ä¿å˜ã¯ã—ã¦ãã‚Œãªã„。 永続化ã«ã¯ãƒ‡ãƒ¼ã‚¿ãƒ™ãƒ¼ã‚¹ãŒå¿…è¦ã 。 ãã“ã§ã€Riak。 Basho社ãŒã‚¹ãƒãƒ³ã‚µãƒ¼ãƒ‰ã™ã‚‹Erlang製分散型KVS。ã“れもOSSã ãŒã€å¥‘ç´„ã«ã‚ˆã£ã¦å•†ç”¨ã‚µãƒ¼ãƒ“スãŒå—ã‘られる。 ã“ã‚ŒãŒã¾ãŸã‚¨ãƒƒã‚¸ç«‹ã¡ã¾ãã£ã¦ã¦
何故ã€fluentdãªã®ã‹ï¼Ÿ - プãƒã‚°ãƒ©ãƒžã§ã‚ã‚ŠãŸã„
最近ã€fluentdã¨ã„ã†è¨€è‘‰ã‚’èžãã“ã¨ãŒå¤šã„ã¨æ€ã„ã¾ã™ã€‚fluentdã¯ã€ãã‚Œãžã‚Œã®ã‚µãƒ¼ãƒã‹ã‚‰ãƒã‚°ã‚’åŽé›†ã—集約ã™ã‚‹ç‚ºã®ã‚¢ãƒ—リケーションã§ã™ã€‚fluentdã¯ã€ŒLog everything in JSONã€ã‚’åˆè¨€è‘‰ã«ã€å…¨ã¦ã®ãƒã‚°ã‚’JSONå½¢å¼ã§æ‰±ã„ã¾ã™ã€‚ã¾ãŸä¸€ç·’ã«èžãã‚ーワードã¨ã—ã¦ã¯ã€å¤§è¦æ¨¡ã¨ã‹ãƒªã‚¢ãƒ«ã‚¿ã‚¤ãƒ ã¨ã‹ãŒã‚ã‚‹ã¨æ€ã„ã¾ã™ã€‚ã“ã®æ™‚点ã§é–¢ä¿‚ãªã„ã‚„ã¨æ€ã£ã¦ã€èˆˆå‘³ã‚’失ã£ãŸäººã‚‚多ã„ã¨æ€ã„ã¾ã™ã€‚ã—ã‹ã—ã€ä»Šå¾Œã®ãƒã‚°ç®¡ç†ã¯ã€fluentdãŒä¸»æµã«ãªã‚‹ã‹è§£ã‚Šã¾ã›ã‚“ãŒã€åŒæ§˜ã®é›†ç´„ã™ã‚‹ãƒ•ãƒ¬ãƒ¼ãƒ ワークãŒä¸å¿ƒã«ãªã‚‹ã¨æ€ã„ã¾ã™ã€‚ 何故ã€fluentdãŒå¿…è¦ã‹ï¼Ÿ ã¾ãšã¯ã‚ªãƒ³ãƒ—レミスã®ä¸–ç•Œã‹ã‚‰è¦‹ã¦è¡Œãã¾ã—ょã†ã€‚ãƒã‚°ã¯ã‚µãƒ¼ãƒãƒ¼ã«ãŸã¾ã‚Šã€ç®¡ç†è€…ã¯ã‚µãƒ¼ãƒã«ãƒã‚°ã‚¤ãƒ³ã—ã¦ãƒã‚°ã‚’å‚ç…§ã—ã¾ã™ã€‚特ã«å•é¡Œã¯ã‚ã‚Šã¾ã›ã‚“。 次ã«AutoScalingを使ã‚ãªã„AWSã®ä¸–ç•Œã§ã™ã€‚ã“れもåŒæ§˜ã«ã€ãƒã‚°ã¯ã‚µãƒ¼ãƒãƒ¼ã«ãŸã¾ã‚Šã€ç®¡ç†è€…ã¯ã‚µãƒ¼ãƒã«ãƒã‚°
Treasure Data - naoyaã®ã¯ã¦ãªãƒ€ã‚¤ã‚¢ãƒªãƒ¼
å°‘ã—å‰ã«ãƒã‚°ã®è©±ã‚’書ã„㟠http://d.hatena.ne.jp/naoya/20130219/1361262854 ã¨ãã«ã€Treasure Data ã«ã¤ã„ã¦ã¯å¾Œæ—¥ã«ã‚‚ã†å°‘ã—詳細ã«æ›¸ãã¨è¨€ã£ãŸã®ã§æ›¸ãã¨ã—よã†ã€‚ è¿‘é ƒ Treasure Data (以下ã€æ™‚折 TD) ã¨ã„ã†åå‰ã‚’ã¡ã‚‰ã»ã‚‰èžã„ãŸã“ã¨ãŒã‚る人ã¯å¤šã„ã®ã§ã¯ãªã„ã‹ã¨æ€ã„ã¾ã™ã€‚「ビッグデータã®ã‚¯ãƒ©ã‚¦ãƒ‰ã‚µãƒ¼ãƒ“スã§ã‚ã‚‹ã€ã¨ã‹ã€Œæ—¥æœ¬äººãŒå‰µæ¥ã—ãŸã‚·ãƒªã‚³ãƒ³ãƒãƒ¬ãƒ¼ã®ãƒ™ãƒ³ãƒãƒ£ãƒ¼ã€ã€ã‚ã‚‹ã„㯠Yahoo! 創æ¥è€…ã® Jerry Yang ãŒæŠ•è³‡ã—ãŸã¨ã‹ã€Fluentd ã¨ä½•ã‹é–¢ä¿‚ãŒã‚ã‚‹ã¨ã„ã£ãŸæ–‡è„ˆãªã©ãªã©ã€‚ ã‘ã©ã€å…·ä½“çš„ã« Treasure Data ãŒã©ã†ã„ã†ã‚µãƒ¼ãƒ“スã§ã€ã©ã†ã„ã†æ©Ÿèƒ½ã‚’æŒã£ã¦ã„ã¦ã€ã©ã‚“ãªå ´é¢ã§åˆ©ç”¨ã•ã‚Œã‚‹ã‚‚ã®ãªã®ã‹ã¯ã¾ã ã‚ã¾ã‚Šè‰¯ã知られã¦ã„ãªã„ã‹ã‚‚ã—ã‚Œãªã„･･･よã†ã«ã‚‚見ãˆã‚‹ã€‚今日ã¯ãã®è¾ºã‹ã‚‰å°‘ã—紹介ã—ã¦ã„ã“ã†ã‹ãªã¨æ€ã†ã€‚
stdout-hook 㨠LTSV #fluentdcasual - naoyaã®ã¯ã¦ãªãƒ€ã‚¤ã‚¢ãƒªãƒ¼
Fluentd Casual Talks #2 ã«è¡Œã£ã¦ãã¾ã—ãŸã€‚ ã®ã£ã‘ã‹ã‚‰ @just_do_neet ã•ã‚“ãŒã€Œ1TBå¼·/dayã®ãƒã‚°ã‚’毎日è£ã„ã¦ã„ã‚‹ã€ã¨ã‹ã€ã€Œãƒãƒƒãƒ•ã‚¡æº¢ã‚Œã¨ã‹ã§1TBã®ãƒã‚°ã‹ã‚‰1件ã§ã‚‚データãƒã‚¹ã—よã†ã‚‚ã®ãªã‚‰éšœå®³ã€ã¨ã‹æã‚ã—ã„ã“ã¨ã‚’ã•ã‚‰ã£ã¨ã®ãŸã¾ã£ã¦ã„ã¦å…¨ç„¶ã‚«ã‚¸ãƒ¥ã‚¢ãƒ«ã˜ã‚ƒãªã„! ã¨ç„¦ã‚Šã¾ã—ãŸãŒã€é¢ç™½ã‹ã£ãŸã§ã™ã€‚ ãã‚Œãžã‚Œã®ãƒ—レゼンã®ãƒ¬ãƒãƒ¼ãƒˆã¯ã©ãªãŸã‹ãŒã„ãšã‚Œã¾ã¨ã‚ã¦ãれるã§ã—ょã†ã€‚主催者㮠@tagomoris ã•ã‚“ã‹ã‚‰ã€ãƒ–ãƒã‚°æ›¸ãよã†ã«ã¨æŒ‡ä»¤ãŒå‡ºã¦ã„ãŸã—。 stdout-hook ã©ã‚Œã‚‚良ã‹ã£ãŸã®ã§ã™ãŒã€@repeatedly ã•ã‚“ã® stdout-hook ãŒé¢ç™½ã‹ã£ãŸã®ã§å応。 https://github.com/treasure-data/stdout-hook アプリケーションãƒã‚°ã‚’ fluentd ã‚„ Treasure Data ã«é€ã‚ŠãŸã„ã€ã‘ã©ã‚¢ãƒ—リケ
1
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
5 Logstash Alternatives - DZone
excale.net
{{#tags}}- {{label}}
{{/tags}}