米Yahoo!は2月24日、分散型のディープラーニング(深層学習)技術「CaffeOnSpark」をオープンソースで公開した。Apache Hadoop、Apache Sparkのクラスタ上でディープラーニングを実行できるという。 CaffeOnSparkは、HadoopおよびSparkベースのクラスタ上でディープラーニングを行うためのライブラリ。ディープラーニングのための高速なフレームワーク「Caffe」に、HadoopとSparkの両ビックデータ技術を組み合わせた。GPUおよびCPUサーバーで構成したクラスタ上で分散型のディープラーニングを実行できる。 Yahooでは製品チームがオンラインデータから洞察を得る目的でディープラーニングを利用していたが、多くのディープラーニングフレームワークでは別途クラスターを構築しなければならず、そのため複数のプログラムを作成する必要があった。さらにクラ
![米Yahoo!、Apache Spark/Hadoopクラスタで深層学習を実行できる「CaffeOnSpark」を公開 | OSDN Magazine](https://cdn-ak-scissors.b.st-hatena.com/image/square/4196864a37518a8c4219cc80d90c0a0b1a82a491/height=288;version=1;width=512/https%3A%2F%2Fmag.osdn.jp%2Fimages%2Fmag%2Fmagazine-200x200.png)