タグ

VTuberと機械学習に関するneko2boのブックマーク (2)

  • 一枚の画像で表情豊かなVTuberになれるシステムを作ってみた

    良かったら記事を読んでください。https://pkhungurn.github.io/talking-head-anime-2/index-ja.htmlソフトはこちらで配布されております。http://github.com/pkhungurn/talking-head-anime-2-demo前回:sm36008660単品動画Wink:sm38083932乙女解剖:sm38083983おちゃめ機能:sm38083956エイリアンエイリアン:sm38084021外郎売:sm38211833トロッコ:sm38211840はかみたい:sm38088189委員長おめでとうの歌:sm38088207GOMIKASU-Original Mix-:sm38088211リアルタイムのツール:sm38215487

    一枚の画像で表情豊かなVTuberになれるシステムを作ってみた
    neko2bo
    neko2bo 2021/02/04
    スッバラシいなあ。尊敬っす。
  • キズナアイとねこますの声を入れ替える機械学習をした - Qiita

    最近バーチャルユーチュ-バーが人気ですよね。自分もこの流れに乗って何か作りたいと思い、開発をしました。 モーションキャプチャー等を使って見た目を変えるのは かなり普及しているっぽいので、自分は声を変えられるようにしようと開発しました。 やったこと キズナアイさんとねこますさんの、それぞれの声を入れ替えられるようにしました。これによって、ねこますさんのしゃべった内容を、キズナアイさんの声でしゃべらせることができます。(逆も) 機械学習手法の一つであるCycleGANを用いて、変換するためのネットワークを学習しました。 パラレルデータ(話者Aと話者Bが、同時に同じ内容を話した音声)が必要ありません 。YouTubeから拾った音声でも変換ができます。 当然ですが、一度学習すれば、利用時には何度でも繰り返し利用できます。 期待できる効果 見た目だけでなく、声まで美少女になれます。やったね。 他にも

    キズナアイとねこますの声を入れ替える機械学習をした - Qiita
  • 1