以前mingwをインストールしようとしたら何故かmingw-get落ちて使えなかった。 今日やってみたら普通に通った。 それはいいんだけどタイトルのとおり検索機能がない。 無いなら作れ、ってことで作った。 perl使えばかなり楽なんだろうけど覚えるの嫌だったのでcatとsedとgrepのみ。 多分mingw-get使ってるなら普通に使えるはず。 MinGW Package search tool · GitHub ほんとはsed一発でやりたかったんだけどやり方わからなくて涙目。
概要 Sparkでのプログラミングは、Scalaのコレクションの関数の記述と似ている。 ScalaのコレクションではRangeやList等のインスタンスを作ってそれに対してmapやfilter関数を呼び出すが、 SparkではまずSparkContextというオブジェクトを作り、そこからコレクションっぽいオブジェクトやファイルを読み込むイテレーターを生成する。これらはRDDという名前のクラスで表されており、RDDにmapやfilterといった関数が定義されている。 import spark._ import SparkContext._ SparkContextは「spark.SparkContext」なので、spark配下のクラスをインポートする。 RDD関連は暗黙変換を利用しているので、SparkContextオブジェクトのメソッドもインポートしておく必要がある。 object Sam
An official Spark homepage is up at spark-project.org. Redirecting you there in 3 seconds.
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く