[Diffusion Model] Hypernetworksのレイヤー構造を変えた際の変化を比較する

はじめに はじめまして、なんかと申します。 少し前に、NovelAIから新しい学習済みLatent Diffsion Modelのチューニング手法としてHypernetworksが提案されました。 しかし、提案とは言っても「ウチではこういうのやってるよ」程度のモノであり、まだまだどのようなレイヤー構造が良いのか、どんなハイパーパラメータが適しているのか、といった探索はほとんど為されていません。 そこで今回は、Hypernetworksについて少し説明を行ってから、使用するモデルやハイパーパラメータを固定し、Hypernetworksのレイヤー構造を変えた場合に結果がどう変わるかについて簡単な比較・検証を行っていきます。 [追記: 10/21 12:52] この記事で使用しているHypernetworks全てに活性化関数が入っていないため、この記事の比較・検証にはあまり意味がありません。 本

[NEXTAltair]

うちの環境では階層はあんまり増やす意味ないな

[misshiki]

“Hypernetworksについて少し説明を行ってから、使用するモデルやハイパーパラメータを固定し、Hypernetworksのレイヤー構造を変えた場合に結果がどう変わるかについて簡単な比較・検証を行って”