速いと噂のPythonのVaexについて詳しく調べてみた。 - Qiita

結構前にPandasやDaskなどよりも大分高速と話題になっていたPythonのVaexライブラリについて、仕事で利用していきそうな気配がしているので事前にしっかり把握しておくため、色々調べてみました。 どんなライブラリなのか Pandasと同じように行列のデータフレームなどを扱うことのできるPythonライブラリです。 Pandasと比較して膨大なデータの読み込みや計算などを高速に行えます（数十倍～数百倍といったレベルで）。 計算上のメモリ効率がとても良く、無駄の少ない実装になっています。 Daskのように計算が遅延評価されたりと、通常はメモリに乗りきらないデータでも扱うことができます。 Daskのように並列処理で計算を行ってくれます。 Pandasと比較的似たインターフェイスで扱うことができます。 この記事で触れること 主に以下のVaexのトピックに関して本記事で触れます。 インストー

[misshiki]

PythonのVaexライブラリ“Pandasと同じように行列のデータフレームなどを扱うことのできるPythonライブラリです。 Pandasと比較して膨大なデータの読み込みや計算などを高速に行えます（数十倍～数百倍といったレベルで）。”

[knok]

遅延評価で速度やメモリの削減を頑張る感じなんだろうか。ハード依存だけど使い勝手ならcuDFの方がよさそうだけど

[suica_j]

DaskにしろVaexにしろJaxにしろ、Jupyterの卓上データサイエンスでこの種のライブラリを使わざるを得ない時点でアンチパターンに陥っている気がしてならない

[cartman0]

新しいやつかと思ったらver4で昔からあるんやな

[apipix]

映えくす？

[tobigitsune]

少なくとも名前の親しみやすさの一点はpandasに負けている。こういうのの広まりやすさは何故か結構名前が大事なんだ…／性能は機会があれば試す

[awawann]

使うかもしれない

[cj3029412]

興味深い。すきすきー🐈💕