SparkはHadoopの後発として期待されるビッグデータ処理基盤 今日は「Apache Spark」という言葉について説明します。先日「Hadoop(ハドゥープ)」についての掲載をさせていただきましたが、その中でHadoopとは、 巨大データの取り扱いを目的とした分散処理のフレームワークである 分散処理によってビッグデータを高速に処理することができる Hadoopの利用者は自作したデータ処理のプログラムや他者が開発したツールプログラムをHadoop内に組み込んでビッグデータ処理を行う と説明させていただきました。またその他関連記事の中で、 Hadoop上で稼動するデータベースマネージメントシステム(DBMS)としてHive・Impalaがあり、 同じくHadoop上で稼動するスクリプト環境としてPigがある これらHadoop連携ソフトウェアの存在がビックデータ処理環境をより便利なものに
![Apache Sparkとは?:Hadoopに続く分散処理のフレームワーク|データ分析用語を解説 - データビジュアライズで経営を視える化する/graffe グラーフ](https://cdn-ak-scissors.b.st-hatena.com/image/square/897815b93decb45d63fef7e7f3d3e7a2f911e3db/height=288;version=1;width=512/https%3A%2F%2Fbst-image.imgix.net%2Fprod-graffe%2Fcontent%2Fuploads%2F2015%2F03%2Feyecatch_words.png%3Fauto%3Dcompress%252Cformat%26ixlib%3Dphp-1.1.0)