かまろ/Camaro @mlaass1 ディープラーニングのモデリングの経験則を語る会をやってみたい。理論的な背景は不要(あってもいい)で、こういうときはこうする、こういうデータにはこうすると上手くいく、初手はいつもこれ、などのヒューリスティックを無責任に語る会。 2020-08-03 12:23:09 かまろ/Camaro @mlaass1 画像だとデータの特徴と合わせてこの辺り話してみたい。 ・image sizeとmodelの大きさ ・batch sizeの決め方とBatch norm ・fp16使うか ・デバイス(GPU/TPU)の違い ・間違いないaugmentation ・間違いないscheduling ・frameworkの違い(tf/pytorch) ・lossの選び方 ・optimizerの違い ・headの設計方法 2020-08-03 12:46:04 かまろ/Cam
![ディープラーニングのモデリングの経験則を語る会についての有識者からの反応まとめ](https://cdn-ak-scissors.b.st-hatena.com/image/square/a757254d1fbd4121905e06234babd54920e48070/height=288;version=1;width=512/https%3A%2F%2Fs.togetter.com%2Fogp2%2F700745842be29a9848c3f051820ebc1d-1200x630.png)