現在、e-NDEXのアクセスログは全部mongodbに入れてお手製のアクセス解析ツールでレポートしています。 最初はとりあえずパフォーマンス無視ということで全部データを取得してRubyで解析するという荒業に出てたんだけど、現状で65万行くらいなので既にかなり重い。7秒とかかかる。 これは微妙ということで、普通にmongoidのCriteriaAPIを使って集計しようとしたんだけど、groupの仕様がイマイチ使いづらい。というかtimestampは秒単位で登録してるので、日付毎のUUが集計できない。 という訳でMapReduce使ってゴリゴリ集計して見ることに。いきなりmongoidでやるのも大変そうなので、まずはコンソールからJSで書きました。 UUはいきなり計算せずに、まず日付毎のIPに集約して、それを一時コレクションに保存。そして、その一時コレクションに対して更に日付毎で集計する、とい

最近いろいろなところでMongoDBという単語を聞きますよね。 そういうわけで興味だけは持っていたが、なかなか腰が重くて取り組んでいなかったMongoDB。 話題になる新技術は、「ただ話題になっているだけ」なのか「本当に便利」なのかが良く分かりませんが、MongoDBはどうやら「本当に便利」っぽいので勉強してみました。そして、実際に便利っぽかったです。 Wikipediaによると、こういうものだそうです。 高パフォーマンス、スキーマレス、オープンソースのドキュメント指向データベース 高パフォーマンスは分かるとして、スキーマレス、ドキュメント指向ってなんだという話です。 スキーマレスってなんだ？ 「MongoDBはJSONのような構造でデータを持ちます」というと、JSONでWeb APIを利用したことがある人は「お、何やら便利そうだな」と思うんじゃないかと思います。JSONって扱いやすいです