エントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
SparkのサンプルをMesosの上で動作させる(REPL) → 動作せず・・・(汗 - 夢とガラクタの集積場
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
SparkのサンプルをMesosの上で動作させる(REPL) → 動作せず・・・(汗 - 夢とガラクタの集積場
こんにちは。 ここまででSparkのローカルアプリケーションとMesosの環境構築が完了したため、 ついに実... こんにちは。 ここまででSparkのローカルアプリケーションとMesosの環境構築が完了したため、 ついに実際にSparkのクラスタをMesosの上で動作させてみます。 まずはHDFSは使わず、ローカルのファイルを読み込ませる形で動作させます。 尚、分散クラスタ上で動作させる必要が出た段階で、 「Sparkの分散配置用アーカイブを生成して、HDFS等の上に配置する」ということが必要になってきます。 で、分散配置用アーカイブを生成するためにはsparkのソースコードをダウンロードした配下にある 「make-distribution.sh」が必要です。 というわけで、今回からビルドも含めて仮想マシン上で行う形になります。 そのため、改めてビルド環境から再構築します。 1.Apache Sparkの配置用アーカイブ作成 1-1.Gitインストール 「spark-0.8.0-incubating-