気に入った記事をブックマーク
- 気に入った記事を保存できます
保存した記事の一覧は、はてなブックマークで確認・編集ができます
- 記事を読んだ感想やメモを書き残せます
- 非公開でブックマークすることもできます
HIVEで文字列の配列化と配列の中身を１レコードずつに分ける方法 - Qiita
2 users
qiita.com/toohsk
qiita.com/toohsk
qiita.com/toohsk
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
HIVEでビッグデータを処理する場合、 ログデータの中から区切り文字（例えば、","コンマ区切り）のデー... HIVEでビッグデータを処理する場合、 ログデータの中から区切り文字（例えば、","コンマ区切り）のデータを１レコードずつに分配したい場合があると思います。 その場合、まずは区切り文字の列を配列に変換し、 それを一レコードずつに落としこんでいきます。 配列に落としこむのは、HIVEで提供されているsplitを使用します。 splitは指定したカラム内の文字列を区切り文字で自動的に分離して配列に格納してくれます。 例えば、hogeカラム内がコンマ区切りの文字列の場合… そして、これを一レコードずつに表示するには、 HIVEのUDFとして提供されているexplodeを使用します。 explodeは配列のデータを一レコードずつに出力するメソッドです。 bar_listというカラムに配列でデータが格納されている、 barsテーブルがあったとします。 すると以下のようにかけます。 この２つの書き方を
qiita.com/toohsk
qiita.com/toohsk
qiita.com/toohsk
qiita.com/toohsk
fromatom.hatenablog.com
hakaiya.hateblo.jp
www.kansou-blog.jp
studyhacker.net
note.com/tanukiponkich
pc.watch.impress.co.jp
www.gizmodo.jp
blog.tkzwtks.net
note.com/igz0
qiita.com/toritori0318
qiita.com/toriiico
qiita.com/toru2220
qiita.com/toritori0318
qiita.com/toohsk
qiita.com/tortuepin
2014/09/02 リンク