気に入った記事をブックマーク
- 気に入った記事を保存できます
保存した記事の一覧は、はてなブックマークで確認・編集ができます
- 記事を読んだ感想やメモを書き残せます
- 非公開でブックマークすることもできます
RailsのログファイルをMessagePackで超高速解析!｜TechRacho by BPS株式会社
53 users
www.bpsinc.jp
www.bpsinc.jp
www.bpsinc.jp
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
最近Railsがガンガン出力するproduction.logを解析してどのアクションがリクエスト多いのか、DBがボトル... 最近Railsがガンガン出力するproduction.logを解析してどのアクションがリクエスト多いのか、DBがボトルネックになってるアクションはないか、などを調べているんですが、production.logがどんどん肥大化して、解析ツールの開発イテレーションを回す際の効率が悪くなってきました。 また似たようなツールをやたらめったらコピペで作ってきたため、開発効率も悪くなってきたので、ここでAPIを整理しつつ、あわよくばログをなめる部分を高速化できないものかと考えました。 シンプルに正規表現をつかって変化する箇所を切り出していたのですが、これではかなり重いのは自明ですし、がんばって文字列をパースするパーサを作ってもrubyではあまりスピードは出なそう、でもrubyで書きたいし.... ということで、一度パースしたデータを読込みに効率よさそうな形式に変換することで、次以降の解析を高速化しよう
www.bpsinc.jp
www.bpsinc.jp
www.bpsinc.jp
www.bpsinc.jp
373news.com
nordot.app
anond.hatelabo.jp
huyukiitoichi.hatenadiary.jp
anond.hatelabo.jp
togetter.com
gendai.media
www.goo-net.com
togetter.com
anond.hatelabo.jp
www.nikkei.com
atmarkit.itmedia.co.jp
2011/06/13 リンク