キャラ画像一枚でモデリングしなくてもＶＴｕｂｅｒになれるシステムを作ってみた

片言の日本語で申し訳ありません。良かったら論文を読んでください。https://pkhungurn.github.io/talking-head-anime/この動画は以下の画像や３Dモデルで作られた二次創作です。＊にじさん所属のライバーの画像（https://nijisanji.ichikara.co.jp/member/）＊ときのそら （© Tokino Sora Ch.）の３Dモデル（https://3d.nicovideo.jp/works/td38103）＊木曽あずき(© Appland, Inc.)の３Dモデル（https://3d.nicovideo.jp/works/td49925）＊伏見ガクの３Dモデル（https://3d.nicovideo.jp/works/td33467）＊花畑チャイカの３Dモデル（https://3d.nicovideo.jp/works/td3

[nikunonamae]

でかい帽子とか角の側面も補完されてるし、被った状態のフードの挙動も違和感なくてすごいって思った😊

[soraboby]

すごい。キャラ画像自体もディープラーニングで作られてるのがさらにすごい。

[maturi]

　https://pkhungurn.github.io/talking-head-anime/

[mongrelP]

強い

[tteraka]

すごい 日本語も堪能w

[RabbitBit]

3Dモデルの正面画像とそれらのモーション後の画像を食わせて学習という発想はそれなりの人が持っていただろうけど、発想と実装には天と地ほどの差がある。実装に至らせた熱意と労力に拍手を。

[sinamon_neko]

目が上になったりしないしすごすぎでしょ。

[pasonco]

骨組まないでやれるならやろうかな

[KoshianX]

これすごいよなあ。俺もこれ使ってコシえもんで VTuber デビューしようかしら……。

[irinoia]

あれこれすごくね？

[hetoheto]

絵師すら要らなくなってきた世界。

[nakayossi]

すごい…

[otihateten3510]

誰か伯方の塩になってみて

[doramata2]

すごすぎでしょ…