サクサク読めて、アプリ限定の機能も多数!
textFileのメソッド自体がHDFSのブロックサイズ設定をベースにパーティションを生成してExecutorに分散させる機能を持っていますか。ローカルファイルでもそれは変わらないと。
kimutansk のブックマーク 2015/02/02 20:32
Spark Programming Guide - Spark 1.2.0 Documentation[spark][parallel][cluster]textFileのメソッド自体がHDFSのブロックサイズ設定をベースにパーティションを生成してExecutorに分散させる機能を持っていますか。ローカルファイルでもそれは変わらないと。2015/02/02 20:32
このブックマークにはスターがありません。 最初のスターをつけてみよう!
spark.apache.org2015/02/02
1 人がブックマーク・1 件のコメント
\ コメントが サクサク読める アプリです /
textFileのメソッド自体がHDFSのブロックサイズ設定をベースにパーティションを生成してExecutorに分散させる機能を持っていますか。ローカルファイルでもそれは変わらないと。
kimutansk のブックマーク 2015/02/02 20:32
このブックマークにはスターがありません。
最初のスターをつけてみよう!
Spark Programming Guide - Spark 1.2.0 Documentation
spark.apache.org2015/02/02
1 人がブックマーク・1 件のコメント
\ コメントが サクサク読める アプリです /