タグ

関連タグで絞り込む (0)

  • 関連タグはありません

タグの絞り込みを解除

Sparkに関するixixixiのブックマーク (2)

  • Spark StreamingをAmazon EC2で使ってみた - Qiita

    この記事は ドワンゴ Advent Calendar 2014 の23日目の記事です。 昨日は hiroki_kanaさん でした。 最近、Sparkというソフトウェアがデータ解析界隈でこれからくる計算基盤になるのではと注目を浴びています こいつを使って、ちょっと簡単なTwitterネガポジ分析をしてみましょう TL;DR sparkは比較的新しい分散処理基盤 その中にStreamを扱うライブラリがある ec2で手軽にクラスタを組んで試せる ec2でspark streamingを使って、ドワンゴに関する文字で検索した結果からネガポジ分析してみた Sparkって何? 最近Scala界隈だったりデータ分析界隈で賑わっている、比較的あたらしい分析処理基盤になります http://spark.apache.org/ このページを見ると、一番上にこう書いてあります 100倍ってちょっとどういうこと

    Spark StreamingをAmazon EC2で使ってみた - Qiita
  • Spark Summit 2014 に参加しました - 株式会社ロンウイット

    著者:関口宏司 6/30から7/1の2日間でサンフランシスコで開催されたSpark Summit 2014に参加しました。Spark初心者の私は明日開催されるトレーニングも受講予定ですが、この2日間の簡単なレポートをしたいと思います。明日のトレーニングで何か書けることがあれば、追加で書くかもしれません。 Spark Summit 2014 の会場となった WESTIN ST FRANCIS (ウェスティン・セント・フランシス)。サンフランシスコ名物のケーブルカーが通るPowell St.沿いの格調高いホテル Apache Spark とは? Apache Spark は大規模データの分散処理をオンメモリで実行するフレームワークで、処理(途中)結果を都度HDDに書き込むバッチ&高信頼処理に向くApache Hadoopに比べて低レイテンシのアプリケーションを実現することができるOSSプロダク

    Spark Summit 2014 に参加しました - 株式会社ロンウイット
  • 1