Asakusaとメニーコア - 急がば回れ、選ぶなら近道

テクノロジーカテゴリーの変更を依頼記事元:

okachimachiorz.hatenablog.com

13 usersがブックマークコメント

コメント

2

記事へのコメント2件

注目コメント
新着コメント

onionskin “M3BP”

2016/12/26 リンク

mkusunok この数年データ層をどうするかは悩ましいところ

2016/12/25 リンク

注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

規約違反を報告

アプリのスクリーンショット

いまの話題をアプリでチェック！

バナー広告なし
ミュート機能あり
ダークモード搭載

アプリをダウンロード

関連記事

Asakusaとメニーコア - 急がば回れ、選ぶなら近道

アドベントカレンダーのエントリーなんで、軽めに。 AsakusaはもともとHadoopでバッチ処理を開発・実行... アドベントカレンダーのエントリーなんで、軽めに。 AsakusaはもともとHadoopでバッチ処理を開発・実行するためのフレームワークだ。これは別に今でもかわっていない。ただし、実行基盤は増えているし、推奨基盤も変わりつつある。現在のところの推奨基盤はバッチあたりで利用するデータ処理の規模が単ノードで完了するような場合はM3BPで、そうでない場合すなわち複数ノードにまたがるような場合は、Sparkを推奨している。これは僕らが経験した「すべてのワークロード」でSpark/M3BPがHadoopの特にMapreduceでの実行結果を凌駕しているためだ。AsakusaDSLはどのプラットフォームでも完全互換なので、コンパイルし直すだけでそのまま動く。MapreduceからSparkの移行は非常に簡単だ。ということで可能ならSpark/M3BPの方が速いので、そっち方がいいのではないでしょうか、と

asakusa
IT

ブックマークしたユーザー

nomber32016/12/29
dowhile2016/12/28
hohoho_ho20052016/12/26
rgfx2016/12/26
onionskin2016/12/26
tinsep192016/12/26
kozai2016/12/26
nyop2016/12/26
atm_09_td2016/12/26
kumagi2016/12/26
mkusunok2016/12/25

同じサイトの新着

同じサイトの新着をもっと読む

いま人気の記事

いま人気の記事をもっと読む

いま人気の記事 - テクノロジー

いま人気の記事 - テクノロジーをもっと読む

新着記事 - テクノロジー

新着記事 - テクノロジーをもっと読む

設定を変更しましたx