NVMeに新機能。ストレージがデータ処理を行う「コンピュテーショナルストレージ」、NVM Expressが発表

NVMe関連規格の標準化団体であるNVM Expressは、ストレージ内でデータ処理を行うための業界標準「コンピュテーショナルストレージ」（Computational Storage）機能を発表しました。 「コンピュテーショナルストレージ」はデータ処理を行えるストレージ コンピュテーショナルストレージとは、その名前が示す通り計算機能を備えたストレージのことです。 基本的にストレージに格納されたデータは、ストレージから取り出されてメインメモリに読み込まれ、それをCPUが処理します。しかし大量のデータを処理する場合、大量のデータをストレージからメモリへと移動させなければなりません。 そこで、ストレージが備えているFPGAやプロセッサを用いてストレージ内でデータ処理が行えるようになれば、データをストレージから移動しなくて済むために高速な処理が期待できます。 そうしたインテリジェントなストレージや

[masara092]

現状でもストレージ専用になってるだけでCPUとDRAMとフラッシュメモリーが載ったIOがPCIeのシングルボードコンピュータなので有効利用したいのはわかる

[Sampo]

40年前たいにゃん先生がSeeNaで高速動作を実現した手法じゃないですか！！！

[aike]

PC-8801のFDDコントローラーで計算させるやつだ！

[ebo-c]

アプリケーション開発者が継続的開発のためにドメイン駆動設計やクリーンアーキテクチャでビジネスロジックとインフラの依存を最小限にすべく頑張ってるのと逆方向に見える進化でおもろい

[daishi_n]

昔のNetezzaとかRedshift RA3、Auroraのインテリジェントストレージを標準化するのかな

[strawberryhunter]

現状では、あらゆるものがOSがファイルシステムと認識している物の上に乗っかっているのにどうやって使うんだろうという疑問はある。／OSやドライバが使うだけの前提ならまあわかる。

[zilog80]

CPUから独立してGPUが大きな処理を行うのだから、ストレージでも同じようにやっていいよね。次はネットワーク関係でやってみるか。

[tmatsuu]

恩恵を受けるのはデータベース界隈とかAI界隈とかだろうか。真っ先に頭に浮かんだのはPG-Stromでした。

[pascal256]

IPUとかですらなく、ストレージに直接計算させるのね。マクロな視点ではソフトウェアでMapReduce以来やってきたけど、これが組み込みかつ標準かされるのは面白そう。SDKとかはどうなるんだろ？

[joker1007]

こういうのがS3とかEBSに入ったら、分散データ処理の効率が向上しそうだな。ベンダーニュートラルというのが良い。

[kotaponx]

著名なファイルシステムの処理はやってほしいなと思うことはある。メタデータのb+tree引っ掻き回す処理とか。

[wwolf]

これが発展するとサイコフレームになるってわけ

[roirrawedoc]

キモいなあ…

[rakuteen]

そのうちAppleシリコンがストレージも兼ねて1チップレットになりそう。

[tattyu]

FPGAがメモリみたいにストレージを扱えるって事？結局計算する時メモリかレジスタにコピーする事にはなりそうだけどPCIeバスを経由しないから早くなるって事なのか？。

[satomi_hanten]

1.投機的スレッドみたいな処理 2.ストレージクラスメモリ的に使うための効率化マッパー って感じでしょうか？

[tofu-kun]

CPUにストレージを近づけるキャッシュメモリではなく、逆にストレージにCPUを近づける発想か。こういうのが増えてくるのかな

[mysql8]

NVMとかExpressとかNode.jsかと思った

[urtz]

となると、NVMe単体で色々完結出来るようになる。そのうちGPUと一体化しそう

[Shinwiki]

結局そこで参照されるもんがただのストレージだったらもったいねえんで、メモリの粒ひとつひとつが新たな能力を獲得しない限り無限ループにならねえか？思想のとこで。

[nakag0711]

物理IO速度は変わらないはずだけどバス速度か何か幾らか速いのかね

[itpcfg]

DWH向けDBのNetezzaがFPGAでディスクから読むデータをフィルタリングしてパフォーマンス上げてたけど、あんな感じのが標準化されるのかな

[solidstatesociety]

データベースの相性は良さそう

[punychan]

そこを突く攻撃が出てくるってこと？高性能化・高機能化ってだいたい攻撃手段の増加につながる。