この記事は、 North Detail Advent Calendar 2019 の22日目の記事です 概要 やりたいこと ピアノ演奏中の手のモーションをスマホカメラで記録する Unityでアニメーションしてピアノ演奏する 技術的なこと google/mediapipeでハンドトラッキング用のiOSアプリをビルド iPhoneカメラで手のモーションを記録 Blenderでアニメーション化 & ピアノオブジェクト作成 Unityに取り込んで再生、指と鍵盤の当たり判定で音を鳴らす 成果物 ※雑音が流れるのでご注意を Unityでピアノを弾いてみたかった (雑音が流れますのでご注意を) pic.twitter.com/fVuHP9Xb0K — ヤマト (@yamatohkd) December 21, 2019 ......はい(出落ち) 作業環境 ・MacBook Pro (Retina, 1