タグ

ブックマーク / qiita.com/YKIYOLO (1)

  • 【Hydra+wandb+etc..】研究室で利用している機械学習実験環境について(追記予定です.) - Qiita

    はじめに TDU_データ科学・機械学習研究室Advent Calendar 5日目 記事書ききれてないです.すみません,もう少し解説加えたものを近日中にアップします!! 普段僕はComputer Visionの研究をしています. 研究ではCNNを用いて伝統文様の解析をしています.昨今の深層学習ではGPUを利用することがほぼマストで.かくいう僕も研究では研究室のGPUマシンを利用しています.リモート(大学のGPU)マシンでの画像関係の実験は難しいです.具体的に言うと,画像は大量にあるので生データを逐一見るのは難しい. そこで,僕は普段GPUマシン上に利用している実験環境について語ります. パラメータ管理: hydra ログ(Accuracy, loss, GPUモニタリング)管理: wandb 画像の管理 sshfs streamlit(オリジナルアプリ) データ管理 csv管理 dvc(D

    【Hydra+wandb+etc..】研究室で利用している機械学習実験環境について(追記予定です.) - Qiita
    misshiki
    misshiki 2021/12/06
    Hydraやwandbでの実験管理について。
  • 1