Impala Q&A - still deeper

2012/11/7に開催されたCloudera World Tokyoに参加してきました。 本編については他の人がまとめてくれるはずですので省略。 懇親会では米国Cloudera社のCTO、Dr. Amr Awadallah氏に直接Impalaの疑問に答えていただきました。非常に貴重な話を聞けたのでまとめておきます。（公開許可済み） その場でメモを取っていたわけではなく思い出しながらのまとめなので、一緒に聞いていた方、clouderaの方は補足をお願いします。 Q&A Q. なぜJavaでなくてC++で実装したか？ A. ImpalaのメインデザイナーがGoogleでC++を使って分散処理(Dremelのこと？)を実装した人物であるのと、JVMの起動コストがレイテンシーの増加につながるため 補足: この人でしょうか Q. 1ノードに偏ったデータを読む必要があるクエリがくると低レイテンシーを

[yass]

"現場ではRCFileの方がよいが、将来的にはtrevniの方がパフォーマンスがよいので推奨。RCFileとtrevniに仕様上の大きな違いはないが、Doug Cuttingによるtrevniの実装が優れている。"

[matsumoto_r]

これあんまり知らないので勉強

[tmatsuu]

メモ。ただし出てくる単語がどれ一つとして分からない

[kimutansk]

これからも楽しみですねぇ

[choplin]

公開してもいいということだったのでImpalaのQ&Aについてまとめておきました "Impala Q&A - still deeper"

[tagomoris]

いや、じつにいい懇親会でした

[showyou]

よくここまで聞いてきたなぁ。。。

[wyukawa]

これは興味深い