タグ

声質変換に関するwitchstyleのブックマーク (2)

  • 「結月ゆかり」とお喋りできるイベントの舞台裏

    2019年5月頭に開催された、 結月ゆかり・紲星あかり中心VOICEROIDオンリー同人イベント「この声届け、月までも五」(声月)の一画で、企画展示をする機会を頂きました。 この展示ブースにて、既存のVR技術と、以前開発した声質変換技術を組み合わせ、 イベント会場に来場されたお客さんが「結月ゆかり」とお喋りできる催しを行いました。 その経験をもとに得られた知見や課題、感想をまとめたいと思います。 企画タイトルは「ゆかりが声月にやってきた」 企画内容この企画の趣旨を一言で言うと、「イベント会場に来ると結月ゆかりと会話できる」というものです。 VR世界に来たお客さん(左)と会話する「結月ゆかり」(右) 「結月ゆかり」は音声合成ソフトウェアVOICEROIDのキャラクターで、 今回のVOICEROIDオンリーイベント「声月」にはファンの方が大勢集まります。 僕自身も「結月ゆかり」が大好きで、話せ

    「結月ゆかり」とお喋りできるイベントの舞台裏
    witchstyle
    witchstyle 2019/12/01
    (2019/05/26のブログエントリ) VR技術を使って「結月ゆかり」の体を動かしつつ、 声質変換技術を使ってアクター自身の声を「結月ゆかり」の声に変換しました。
  • リアルタイム声質変換ライブラリ「Realtime Yukarin」を公開しました

    はじめにリアルタイム声質変換アプリケーション、Realtime Yukarinを開発し、 OSS(オープンソースソフトウェア)として公開しました。 ここで言う声質変換とは、「誰でも好きな声になれる」技術のことを指します。 好きな声になれる声質変換は夢があって流行りそうなのですが、まだ全然普及していないと思います。 それは現時点で、声質変換を実際にリアルタイムで使えるフリーな仕組みが無いためだと考えました。 そこで、自由に使えるリアルタイム声質変換アプリケーションを作り、ソースコードと合わせて公開しました。 声質変換とは声を変える方法で有名なのは、声の高さや音色を変える手法、いわゆるボイスチェンジャーです。 既存のボイスチェンジャーは、元の声を起点として、変換パラメータを自分で調整する必要があります。 一方ここでの声質変換は、元の声と好きな声を用いて機械学習し、変換パラメータを自動で調整しま

    witchstyle
    witchstyle 2019/12/01
    (2019/09/27のブログエントリ) 声質変換の機械学習タスクで作成したモデルと、GPU搭載パソコンを用いて、 コマンド1つでリアルタイムな声質変換ができます。
  • 1