ScalaでHadoopのジョブを書く - それっぽい駄文
HadoopのジョブをScalaで書くためのこんなものがある。 - http://blog.jonhnnyweslley.net/2008/05/shadoop.html 試したところ、サンプルがHadoop 0.20.2では動かないっぽい。 サンプルを動くように改変してみた。 WordCount.scala import shadoop.SHadoop._ import java.util.Iterator import org.apache.hadoop.fs._ import org.apache.hadoop.io._ import org.apache.hadoop.mapreduce.lib.input.FileInputFormat import org.apache.hadoop.mapreduce.lib.output.FileOutputFormat import or
GitHub - bsdfish/ScalaHadoop: A wrapper for Hadoop in Scala
This code provides some syntactic sugar on top of Hadoop in order to make it more usable from Scala. Take a look at Examples.scala for more details. A basic mapper looks like object TokenizerMap extends TypedMapper[LongWritable, Text, Text, LongWritable] { override def map(k: LongWritable, v: Text, context: ContextType) : Unit = v split " \t" foreach ((word) => context.write(word, 1L)) } or, you c
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://jonhnnyweslley.net/blog/shadoop/
