Hadoopを業務で使ってみた話 - クックパッド開発者ブログ
8月に入社した佐々木です。こんにちわ！ 入社してからはHadoopを使うことが多く、日々、大規模データと格闘しています。大変ではありますが、個人ではなかなか触ることが出来ないような大規模データを触れるのは楽しいです。 さて、Hadoopは最近色々なところで使われ始めてきていると思うんですが、実際に利用してみて困った事やtipsなど、実践的な情報はまだあまり公開されていません。その辺の情報をみんな求めているはず…！！ そこで、僕が実際に触ってみて困った事やHadoopを使う上でポイントだと思ったことなどを社内勉強会で発表したので公開してみます。Hadoopを使っている（使いたいと思っている）方の参考になれば幸いです。 [slideshare id=2711363&doc=20091214techblog-091213183529-phpapp02] Hadoopの利用はまだまだ試行錯誤の連続
Quick Start
このドキュメントでは、Hadoop Distributed File System (HDFS のアーキテクチャを参照) や Map/Reduce フレームワークがどういうものなのかについて感触をつかんでもらうために、シングルノードの Hadoop を短時間で手軽にインストールして実行できるようにする方法を説明します。実際に Hadoop をインストールしたら、HDFS 上で簡単な操作を行い、サンプルジョブを実行します。 サポートされるプラットフォーム GNU/Linux は、開発プラットフォームおよび実用プラットフォームとしてサポートされています。Hadoop は、これまでにも 2000 ノードの GNU/Linux 上でデモンストレーションが行われています。 Win32 は開発プラットフォームとしてサポートされています。Win32 上では分散処理が十分にテストされていないため、実用プラ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Google基盤ソフトウェアのオープンソースクローンを使ってみる一覧
