HbaseとPigで遊んでみる。その2 - ここにタイトルを入力|
http://d.hatena.ne.jp/goth_wrist_cut/20110529/1306695210 前回の続きでする。 前回までのあらすじ。 EasyMode上等 OpenJDKではなく、OracleJDK conf-pseudo便利 .outではなく.logをつかうべし ディレクトリは勝手に作らせるが吉 Webインターフェースが素敵 円周率はおよそ3.6。 今回はHBaseの導入と起動、そんでshellで遊ぶ。 実際にTwitterのTLをいれよう、とか思ったのだけど、思った以上に長くなったのでここまで。 次回はTwitterからデータを入れてみます。 起動 インストールは前回でまとめてやってしまったので特にやることは無し。 設定に関しても疑似分散モードなら無設定で動きます。 完全分散モードの場合には、完全分散で動かすよ！という指定やらデータの保存先(HDFSのnameno
HbaseとPigで遊んでみる。その1 - ここにタイトルを入力|
そんなわけでもうそろそろ6月ですが、3月のに行ったインターンで学んだこととか思い出すためにHadoopで遊んでみました。 方針的にはHBaseを中心に、適当にTwitter検索的なものを作ってみたり、あとはPigとかいじれればいいなぁ、と考えてます。 あと、基本的には「Hadoop徹底入門」をベースに経験をプラス、といったところです。 あまり有用な情報があるかは分かりませんが、メモ程度に。 兎にも角にもとりあえず準備から。 準備 手頃なマシンもないし、最初はEC2とか使ってみようかなー、とか思ったのですが、諸般の都合でVMWare上でやってます。 OSは適当にCentOS。Gentooとかも考えたんだけど、めんどそうなので一番簡単そうなせんとくんで。 HadoopはClouderaのをyumで。一番簡単そうｎ(ry ついでにいえば、一番簡単そうな疑似分散モードで遊ぼうと思ってます。 気が向
HBase at Mendeley
The details behind how and why we use HBase in the data mining team at Mendeley.
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
