PyTorch (15) CycleGAN (horse2zebra) - 人工知能に関する断創録

今回はCycleGANの実験をした。CycleGANはあるドメインの画像を別のドメインの画像に変換できる。アプリケーションを見たほうがイメージしやすいので論文の図1の画像を引用。 モネの絵を写真に変換する（またはその逆） 馬の画像をシマウマに変換する（またはその逆） 夏の景色を冬の景色に変換する（またはその逆） こんな魔法のようなことが実現できる。 似たような技術にpix2pixという技術がある（両方ともUC Berkeley）が、これは変換元画像と変換先画像の1対1のペアの訓練データが必要になる。その一方で、CycleGANはこのようなペアとなる訓練画像が必要ないという利点がある。ドメインAの画像セット（馬の画像セット）とドメインBの画像セット（シマウマの画像セット）だけがあればよい。 いろいろなアプリケーションがあるが、今回はウマをシマウマに変換するというアプリケーションを実験してみた

[stealthinu]

MMVCで音声をVCして生成した音声をさらに逆方向にVCしてロス見るというアイデアを書いたら天王洲氏よりそれってCycle Consistency Lossと同じアイデア？と指摘された。すげえ慧眼だわ。

[karaage]

CycleGANは気になってたのでありがたい！