2022-09-01 日課の RSS フィードを眺めていると、クエリエンジンやデータ処理の最適化のための高速化ライブラリが Meta が OSS として公開した1 のを知った。 Velox のリポジトリはこちら facebookincubator/velox: A C++ vectorized database acceleration library aimed to optimizing query engines and data processing systems. 実際にリポジトリを観てみると C++で書かれており、たしかにパフォーマンスが高いのが納得。 ドキュメントやチュートリアルなどはこちらのサイトで用意されています。 Hello from Velox | Velox Meta 社内では、Presto や Spark に適用して処理の高速化、PyTorch に活用して前処理
![Meta が公開したデータ処理の効率化・高速化を狙うエンジン Velox が面白そう](https://cdn-ak-scissors.b.st-hatena.com/image/square/ca3bd6c2575f2caa439a07480706f72979811471/height=288;version=1;width=512/https%3A%2F%2Fshunyaueta.com%2Fogp.jpg)