Parallel Machine Learning for Hadoop/Mapreduce – A Python Example | atbrox
Parallel Machine Learning for Hadoop/Mapreduce – A Python Example Atbrox is startup providing technology and services for Search and Mapreduce/Hadoop. Our background is from from Google, IBM and Research. Update 2010-June-17 Code for this posting is now on github –http://github.com/atbrox/Snabler This posting gives an example of how to use Mapreduce, Python and Numpy to parallelize a linear machin
2006-10-01
Googleの分散処理技術であるMapReduceの解説記事をid:YuichiTanaka:20060923さん経由で知りました。 面白そうなので、このMapReduceをPythonで実装したらどうなるかやってみました。 やってることはid:u-no:20060318さんと同じで、 要は通信の代わりにメモリ使って、プロセスの代わりにスレッド使ってってこと。 です。つまりMapReduce簡単版ってところですかね。 でも、プログラミングモデルとしては参考になると思います。 ソースコード import threading import urllib2 import utils class MapReduce: class Worker(threading.Thread): def __init__(self, func, args): threading.Thread.__init__(s
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
