Score Alignment | Y2 PROJECTPROJECT Score Alignment 機械が人の演奏に「合わせてくれる」技術 "スコアアライメント" スコアアライメントって何？ 「この曲弾くよ！」と弾く曲の楽譜データを指定し、マイクに向かって演奏すると、 今「どこを弾いているか」を逐次教えてくれる技術です。楽譜版GPSのようなものです。 どんな事ができるの？ 本技術の応用事例として、映像同期のコンセプトデモを作りました。 キャラクター『初音ミク』がピアノ演奏に合わせてラジオ体操をします。 動作を滑らかにするための数理モデルを導入することで、人の演奏に対して自然に体操が追従します。 この動画では、人の演奏に合わせて『初音ミク』が踊ります。 スコアアライメント技術を用いることで、演奏されるテンポの抑揚や演奏位置の移動に対しても、柔軟に追従します。 特に、『フェルマータ機能』を用いて、音を伸ばす箇所を予め指定することで、音を伸ばして
