タグ

ブックマーク / zegenvs.hatenadiary.org (1)

  • RubyKaigi 2日目[ruby][rubykaigi] - d.hatena.zeg.la

    Ruby会議2日目に行ってきました 分散並列処理フレームワークfairy スピーカー 増田 創さん What's fairy? 分散処理を簡単にするミドルウェア ネットワーク環境を意識しない 複数サーバーに散らばったデータを高速処理 Ruby実装 汎用性が高いMap/Reduce以上の柔軟にプログラムが書ける Rubyならではの生産性の高さ なぜ分散処理? 大規模なデータを効率的に処理、分析できる企業が勝ち組となる MapReduceとは? オリジナルはグーグル Map 入力データ->キーと値に分ける Reduce 同じキーで値をまとめたり? 上記を複数サーバで fairy同様な他の実装 starfish hadoop 現状ステータス 楽天社内ではα版 番投入はしてない バッチ処理に試験投入 パフォーマンスに課題 fairy詳細 Filter I/F inputでデータを読み出し fil

    RubyKaigi 2日目[ruby][rubykaigi] - d.hatena.zeg.la
  • 1