タグ

ブックマーク / catindog.hatenablog.com (1)

  • dask.distributedで分散処理 - にほんごのれんしゅう

    dask.distributedで分散処理 dask.distributedの使い方と、具体例集です dask.distributedの簡単な理解 一種の分散処理フレームワークになっており、便利です。 ドキュメントやgithubはdaskからdask.distributedは分割されており、DataFrameの取扱以外のより汎用的な分散処理を含んでいるようです。 Celeryとかでもやったことをがあるのですが、dask.distributedはRemote Procedureのそれよりまともでより整理された方法で、concurrent.futureのリモート版とも考えられます。 dask.distributedのインストール pip経由でのdaskのインストール $ sudo pip3 install dask $ sudo pip3 install distributed ubuntuで

    dask.distributedで分散処理 - にほんごのれんしゅう
  • 1