第５回 ビッグデータ「ビッグデータ」は業界をにぎわせているキーワードである。このキーワードにさまざまな意見があるだろうが、技術や製品の進化はビッグデータのニーズに応える形で進化している。ITエンジニアなら、そうした進化をしっかりと押さえておきたい。 ビッグデータを扱う製品の代表といえば、分散処理機構を備えたHadoopだろう。だがHadoopのプログラミングモデルであるMapReduceは習得が難しい。そこでビッグデータの収集と1次加工のみHadoopを使い、データ分析はそれを得意とするデータベースに任せる方向で技術が進化している。 筆者が特に注目しているのが「カラム型分散データベース」だ。分散型でスケーラビリティーを確保しつつ、カラム単位で高速検索・集計する機能を備える。データ圧縮機能もある。複雑なインデックスは不要でSQL文も利用できるので、MapReduceより簡単に使いこなせる。米国大統領選挙でもHa
