Hadoopに興味をもった理由 - ひしだまの変更履歴

ひしだまＨＰの更新履歴。 主にＴＲＰＧリプレイの元ネタ集、プログラミング技術メモと自作ソフト、好きなゲームや音楽です。 自分が初めてHadoopの名を聞いたのは、2010年2月。営業の人がお客さんから問い合わせを受けて、何故か僕のところへ聞きに来たのだった。 「はどぅーぷって知ってる？」「知りません」 で、知らないままなのも気持ち悪いのでググってみたところ、最初に目に留まったのがYahoo!JAPANの吉田さんのブログ。 6時間の処理が5分ですと？！ なんと約60倍の短縮。 その頃自分が担当していたシステムでは、夜間バッチの遅さが問題になっていた。 8時間の処理が「3時間にならない？」とか言われて、小手先の最適化で多少は速くなるとしても、結局RDBがネックなのでそこまで速くなる訳が無い。 と思っていたところへ、60倍。20台のマシンで処理しているから理屈上は20倍、話半分に聞いて10倍だっ

[madarax11]

hive確かに便利だけど使いやすさから、そればっかになりそうなのを懸念してる [R2T] Hadoopに興味をもった理由 – ひしだまの変更履歴