機械学習向けの実験管理ツールSacredを紹介する - Qiita

記事を書いたきっかけ kaggleをはじめとするデータ解析コンペに参加する中で、実験管理の煩雑さに悩まされていました。 機械学習プロジェクトでは、モデルのアーキテクチャ検討やハイパーパラメータ探索のために、複数回の実験を行うことが一般的です。 実験の数が少ないうちはGitとTensorBoardと表計算ソフトぐらいがあれば管理は事足りるのですが、実験条件のバリエーションが増えてくると、どんどん見通しが悪くなってきます。 私はズボラなので、油断していると実験時の条件がわからなくなり、ベストスコアが再現できなくなったりしました。これは非常に困ります。 何かうまい方法はないかと調査したところ、Sacredという良い感じのOSSを発見したのですが、日本語の情報が殆ど見当たらなかったため、紹介のために記事を書くことにしました。 実験管理ツールの必要性 機械学習に限った話ではありませんが、実験の記録で