NEC、ベクトル型コンピュータに適した機械学習向けデータ処理技術を開発

NECは、ベクトル型コンピュータに適した、機械学習を高速実行するデータ処理技術を開発したことを発表した。 AIの一手法である機械学習技術を用いて大規模なデータを分析する際、複数のサーバを接続したクラスタと呼ばれるハードウェア環境で、Sparkなどのミドルウェアを用いて分散処理を行うのが一般的となっている。しかし、データ量が膨大な場合、処理性能が追い付かない、あるいは多数のサーバを要するためのコストがかかるという課題があった。 NECは今回、大規模な機械学習でよく用いられる「疎行列」というデータ構造に着目した演算技術と通信技術を開発することで、機械学習においても、ベクトル型コンピュータが持つ性能を最大限に発揮した高速実行を実現した。 また、機械学習を行う各種プログラムから同技術を容易に利用できるミドルウェアを開発した。同ミドルウェアはSparkやPythonから、これらが提供する機械学習ライ