同一のイメージから大量のコンテナを作成するcombuの話 - Qiita

tl;dr シミュレーション向けに1つのイメージから大量のコンテナ(実験環境)を作るツールを作った お金に余裕がある人はAWSのsagemaker-experimentsを使うと良いのかも 中間生成物収集ツールのdecotraも見てね 対象 Docker上で実験ができる（コードを動かせる）人 並列処理を書く勉強を一旦後回しにしたい人 はじめに 自分が行っていたシミュレーションの実験では複数の環境に対して，複数のパラメータを必要とし，それら全てを探索対象とする必要がありました． つまり，実験数=環境数*パラメータ数となります． これを順々に処理すると途方もなく時間がかかりそうな気がしていました． また，途中で解が定まらず，次の実験が始まらないことがありました． そこで，実験数分だけDockerコンテナを起動し，各パラメータを実行時に渡す方法で並行処理を実現する方法について考え，実装しました．