SQLライクにHadoop Hiveを使い倒す!

パーティションを利用する 今回は少し凝ったテーブルを定義をしてみましょう。 郵便番号データは毎月更新されるので、テーブル指定時にバージョンも指定できるようにします。このような場合、Hiveではパーティションを使います。 以下に郵便番号を保存するテーブル「zip」を定義しますが、日付型DATEのパーティションverを設定するようにします。 hive> CREATE TABLE zip (zip STRING, pref INT, city STRING, town STRING) > PARTITIONED BY (ver DATE) > ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' > LINES TERMINATED BY '\n'; OK Time taken: 0.128 seconds

[nilab]

「郵便番号データは毎月更新されるので、テーブル指定時にバージョンも指定できるようにします。このような場合、Hiveではパーティションを使います」「日付型DATEのパーティションverを設定するようにします」

[at_home]

hadoop hiveはfacebookが開発したそうな。hadoop関連は奥が深いなぁ

[hiroyukim]

よむよむよむ

[androidzaurus]

あとで使い倒す

[sett-4]

(via matetsu)