バーチャルYouTuberは音楽を“見せられるか” 「ときのそら」の新たな挑戦と可能性｜Real Sound｜リアルサウンド テック

バーチャルYouTuberがぶつかる制約の壁は大きい。ピアノが弾けても、ピアノを弾く姿を見せることは難しいのだ。 昨今のバーチャルYouTuberブームの中で、彼らはいかに彼ら自身のプレゼンスを強くするかに悩まされている。「人間的に自然」なものをバーチャルという100%人工的なステージで表現する為の技術は現在も進化しており、その片鱗は「音楽」においても見えてきた。それはバーチャルYouTuberを楽器の演奏者として立たせることであった。 3Dモデルの存在である彼らが、楽器を演奏している姿を見たことがあるだろうか。筆者がこれまでに見てきたのは、「ピアノを弾いているが手元を写していない」ものだったり、「頭以外全部実写」だったりといった、誤魔化しや突き抜けた発想でカバーしているものたちである。仕方ないことだ。楽器演奏において指の細かい動きは必要不可欠だが、それを3Dのトラッキングで表現するのは不

[ukayare]

midiの入力に対してモーション出力紐付けるのは面白いけど、そうなるともう本人が演奏する必要はないよなあと思えちゃって（midi再生すりゃいいんだから）、なんか違うよなあってモヤモヤしちゃう

[myrmecoleon]

んー ピアノだからと言ってるけど、要するにMIDI出力できるシンセサイザーならいいので管楽器デザインのEWIとかでも成立するんじゃないかな。

[hrmk4]

MIDIの入力から運指を逆算するってことは、ピアノを弾いて木琴をたたかせるとかもできる?/YAMAHAみると、電子楽器ってピアノ、管楽器、ヴァイオリン系、大正琴まであるのね。

[otihateten3510]

あ、見ようこれ

[Fushihara]

キネクトのカメラは奥行きが取れて個別の指のモーション取れたはずだけど、キネクトカメラ使ってるvtuberって居るのかな。それとも、今どきのカメラは奥行きあって当然だからキネクト使う意味は無いのか

[u_mid]

ドラムは指のトラッキング必要ない(握りっぱなし)ので新技術開発なしにXsensMVN等の慣性センサー式のモーキャプスーツでいけるのでは。一方マーカー式はドラムセットに隠れそうだけどあらゆる方向にカメラある環境なら