小さなファイルをたくさん処理したい時にはこれ使えばいいのね。s3distcpでファイルをconcatするときとかによさげ。

imai-factoryimai-factory のブックマーク 2013/11/21 19:07

その他

このブックマークにはスターがありません。
最初のスターをつけてみよう!

reuse JVM in Hadoop mapreduce jobs

    I know we can set the property "mapred.job.reuse.jvm.num.tasks" to re-use JVM. My questions are: (1) how to decide the number of tasks to be set here, -1 or some other positive integers? (2) is it ...

    \ コメントが サクサク読める アプリです /

    • App Storeからダウンロード
    • Google Playで手に入れよう