What is this? InputFormat/OutputFormat to use HBase tables as input/output of MapReduce in Hadoop Streaming. Repository http://github.com/wanpark/hadoop-hbase-streaming/tree/master Usage debian:~% hadoop dfs -mkdir dammy_input debian:~% ha…

前のエントリーをマニュアルっぽく更新 http://d.hatena.ne.jp/wanpark/20081112/1226504022 変更点 オプションのパースのバグ修正 inputformat に xml, list を追加 inputformat のオプションを追加 今後の予定 output でテーブルに書き出す その他 Thrift …

Hadoop の MapReduce で HBase を使ってみましょう。 0. 参考ページ http://wiki.apache.org/hadoop/Hbase/MapReduce 1. セットアップ $HADOOP_HOME/conf/hadoop-env.sh の HADOOP_CLASSPATH に HBase のパスを加えます。 export HADOOP_CLASSPATH=$HBASE_HO…

HBase のテーブルを Hadoop Streaming の入出力にするための InputFormat/OutputFormat を書きました。GitHub - wanpark/hadoop-hbase-streaming: HBase InputFormat/OutputFormat for Hadoop Streaming 例 debian:~% hadoop dfs -mkdir dammy_input debian:…

Hadoop と HBase で分散処理が書けるのはわかったけど、いざ使ってみるとなるとドキュメントが少なくて……、というあなたの為の HBase 入門、今回はセットアップから Java の API で HBase を触るまでを勉強します。 使用するバージョンは Hadoop 0.17.2.1、H…