hiveserver2 & beelineを復習してみる – OpenGroove
前回投稿の続き。HiveのメタストアにMariaDBを使うことはできるのか、と検証したらHive CLIからhiveserver2 & beelineへ早く移行してくれ、と警告が出たのでhiveserver2も動確せざるを得なくなり、いや、別に無理にしなくてもいいんだけど、気になるのでやってみた。自分の過去記事をあさったら、hiveserver2はうっすらいじったことはあったんだが（HiveServer2とbeelineで遊んでみた記録）、すっかり忘れているのでこの機会に復習してみる。 実行環境は前回同様、AmazonEC2上のCentOS6.6 & Hadoop擬似分散環境(CDH5.4.4)。今回の記事にはほぼ絡んでいないが、HiveのメタストアDBとしてMariaDBが動いている。 hiveserver2が入っていなかったので入れる。 $ sudo yum install hive-
Hiveのメタストアについておさらい – OpenGroove
Hiveのメタストアは、何かにつけて、ハマる。分かっているつもりで分かってなかったことも、未だにある。このブログ内や他の場所のあちこちに気づいたことを書いているが、散乱しているのでここでまとめてみる。 以下、過去記事からの引用。 メタストアサービスについて Hiveではメタストアサービスと呼ばれるものを利用する。メタストアサービスはテーブル定義、ここでは「テーブルとHDFS上のデータの対応情報」を管理する。メタストア自体はRDBMSを使用してその情報を管理している。メタストアサービスは以下の3種類があり、要件によって使い分ける。 組み込みメタストア もっとも手軽に利用できる形態。HiveにはJavaで実装されたDerbyというDBが組み込まれており、そのDBをメタストアリポジトリとして利用する。hiveコマンド起動によりDerbyも起動する。同時に一人のユーザーしかHiveを利用できない、
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
