画像ベースの仮想試着の最新手法 O-VITON [Amazon CVPR'20]のご紹介 - ほろ酔い開発日誌

はじめに 今回は先日Amazonが公開し、CVPR'20にも採録された最新の仮想試着の論文について説明したいと思います。私自身、同系統の仮想試着の研究を行っていたので、周辺知識や個人的な見解も交えて説明をしたいと思います。背景が長いのですが、読むと仮想試着の研究について雰囲気がつかめると思います。 O-VITON [Neuberger+ CVPR'20] Image Based Virtual Try-on Network from Unpaired Data 注目ポイントは、以下の2点です。 学習に使うデータセットの条件が緩くなり、かつ、精度も既存手法に勝る 既存手法では特定のアイテムだけの着せ替え(例: トップスだけの着せ替え)だったが、複数のアイテムを一度に着せ替えられるようになった (以下、説明では各論文から引用した画像を用います。) 以下が、結果の図です。「Query Image