VAEとGANを活用したファッションアイテム検索システム - ZOZO TECH BLOG

データサイエンティストの中村です。今回はイメージファーストなファッションアイテム検索システムを作ってみたのでそちらの紹介をしたいと思います。 本記事で紹介する技術はIBIS2016でも報告しています。 概要 ファッションアイテムを探すとき、見た目の印象はとても大事な要素です。ファッションは感覚的なものなので、自分が欲しい服について言葉で説明することは難しいですが、そのアイテムの良し悪しは画像を見ただけで判断できるからです。 今回開発した検索システムは見た目の印象を大事にしたいので、画像をクエリとします。ただし、ただの画像検索では面白くないので、色や形状などの属性情報を付加した状態で検索を実行できるようにしました。 例えば、「シルエットは良いんだけど、これの赤いやつが欲しい」のような感覚的な注文を、以下のGIFのように画像に属性を付加する形で拾っています。 よくある検索システムではカテゴリに

[prototechno]

#CCSE2018

[bufferings]

面白いなー

[mrkn]

とてもおもしろい

[gfx]

“今回開発した検索システムは見た目の印象を大事にしたいので、画像をクエリとします” おもしろい…！

[hisaichi5518]

すごいな

[razokulover]

やばい

[KSKSKSKS2]

VAEとGANで生成した画像の特徴量をタスクに最適化した応用例

[braitom]

すごいな。これはおもしろい。 “今回開発した検索システムは見た目の印象を大事にしたいので、画像をクエリとします”

[masudaK]

用語マジ分からない

[marmotY]

応用範囲広そう。

[chezou]

GANとspotifyのannoyを使ってファッション検索

[sho]

これはヤバい感じにすごいな(語彙力

[ainame]

すごい“今回開発した検索システムは見た目の印象を大事にしたいので、画像をクエリとします。ただし、ただの画像検索では面白くないので、色や形状などの属性情報を付加した状態で検索を実行できるようにしました”

[stealthinu]

ニューロで元画像とそれに対しての不可パラメータから画像を自動生成させてその近傍検索して好みのアイテムを探すというシステム。すごい。

[fcicq]

IBIS2016

[gocci2]

ディープラーニングを使った検索システム