Hadoop Conference Japan 2014 #hcj2014 でImpalaがPrestoより19倍速いという話をしてきた - 科学と非科学の迷宮
Evolution of Impala #hcj2014 from Cloudera Japan タイトルとスライドの通りです。 Hadoop Conference Japan を運営された皆様、本当にお疲れさまでした。 また、私のセッションに参加して話を聞いていただいた皆様、ありがとうございました。 朝のキーノートで「使用しているコンポーネント」で Impala がランクインしていて実は結構驚きました。まだまだ普及していないと思っていましたけど、意外と使われているようでうれしいです。 (後 Hue がランクインしているのにも驚いた) 今回は他のSQLエンジンのセッションの間に挟まれての講演だったので、これは気を抜けないなと思い、結構頑張ってスライドを作りました。 やっぱり調べてみると Impala はとても面白くて、機能の細かい部分などを見て新たな発見もたくさんすることができました。 I
Evolution of Impala #hcj2014
Hadoop Conference Japan 2014 で発表した、Impala の資料です。Read less
Impalaセットアップ – OpenGroove
数ヶ月前にImpalaで遊んでみようとしたときは、Cloudera Managerから入れるのは簡単だけど個別に入れるのは面倒くさそうだったのでスルーしてしまったが、先日購入したO’REILLY の「プログラミングHive」にセットアップ方法が記載されていたのでやってみた。でも書籍の方はレポジトリURLの情報が古かったり、しましたね。設定ファイルの内容も若干変わっている様子。 環境はAWSのLargeインスタンス、CDH4.3のHadoop疑似分散モード。いつもはSmallマシンをケチケチいじっているのだが、Impalaはリソースをかなり喰うと聞いているので、Smallじゃ無理だろう、と。もともと使っているHadoop疑似分散モードのマシンからAMIを取得して、Largeで起動。HBase, Hiveのセットアップも済んでいるから、楽チン（ImpalaはHiveと共通のメタストアを使用する
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Tatsuo Kawasαki on Twitter: "クラスタで利用できるメモリなどのリソース量、複数ユーザーからのクエリの同時実行の有無などによっても、SQL on HadoopにはHiveやImpalaなど何を使うべきかが変わってきますね https://t.co/SfLBSYaoMs"
