Cloudera World Tokyo 2013に参加してきました #cwt2013 | DevelopersIO

Cloudera World Tokyo 2013に参加してきました。 http://www.cloudera.co.jp/jpevents/cwt2013/index.html 午前中は用事があったので午後からの参加となりました。参加したのは以下のセッションです。 13時30分〜14時10分 CDH最新情報 14時25分〜15時05分 Hadoopデータプラットフォーム 15時30分〜16時10分 SQLで実現するバッチ処理とストリーム処理 16時25分〜17時05分 Hadoopの運用 17時20分〜18時00分 Hadoop コミュニティと YARN の現状 ということで参加レポートですが、現時点でスライドが公開されていないものが大半だったので、各セッションに関して概要といいつつ詳細まで書いています。ここについてはスライドが公開されたタイミングで差し替えていく予定です。 CDH最新情

[kimutansk]

「YARNは大規模向け」「Mesosは大規模向け」というのはMesosの方が高機能で汎用性高い分の代償として納得がいく内容ではあります。で、新たなSPOFも出ますよね。。

[wyukawa]

素晴らしいレポート。生ログは一時加工かあ。

[oza_x86]

ありがとうございます！ "YARNが出てきた背景について説明がありましたが、やっとここで理解出来ました。"

[tagomoris]

これは多分JVMの起動コストですねｗ どんな速いマシンでも数秒かかる “EC2上でNorikraのインストールを試してみたのですが、CPUネックのようですね。c1.mediumでももっさりしていました。”