バーチャルキャラクターの表情表現のためのデバイスとソフトウェア - Qiita

はじめに バーチャルキャラクターに対してどれだけプレゼンスを感じられるかというのは非常に大きな課題ですよね。 そのプレゼンスの表現において表情は非常に大きな要素です。 様々な場面・状況があり、バーチャルキャラクターに表情の概念を実装する手法も様々です。 「これ」という正解ないように思え、イベントやバーチャルキャラクターごとに工夫を凝らしているように思います。 とはいえ、ある程度よく使われる手法や組み合わせといったものはあるように感じているので、自分の知っているものを紹介していきます。 (Unityのようなリアルタイムゲームエンジン上にシステムを組む前提で、既製品のVTuberシステムは省きます。) デバイスとソフトパターン ヘッドマウントカメラ + Dynamixyz ヘルメットのようなものにカメラをつけてそれで常時顔を映し、その映像から表情解析してキャラクターに反映させます。 出典：茨城