bits/dims ってなんだよって言われて虚無になったので調べてみた - Qiitaこれまでのあらすじ RealNVP なんかの 画像生成系の論文 を友人と共に 殴り合いながら 読んでいたときに出てきた、評価手法、bits/dims が気になって夜も眠れなくなった。 我々の明日はどっちだ 調べてみたら、良い感じの Reddit が出てきた [Discussion] Calculation of bits/dims で良い感じに議論されていた。どうやら PixelRNN の論文で触れられているらしい。 PixelRNN の論文へGO PixelRNNで該当部を探すと、こんな感じの文章が書いてあった。 For MNIST we report the negative log-likelihood in nats as it is common practice in the literature. For CIFAR-10 and ImageNet we report neg
