指先で触る - MediaPipeとThree.jsで作る新感覚な体験を試してみた -

はじめに J!NSのKa2です。 突然ですが、僕らは、スマホやパソコンを通して、めちゃくちゃ多くの情報に触れています。ただ、僕らと情報との間にはブラウザやアプリなど、何かしらのインターフェースが存在し、多くの場合、マウスやポインターを介して、情報に接しています。そんな時、「もっと直感的に情報に触れられたらいいのになぁ」と考えていました。 指先でのスワイプやタップも便利ですが、もっと自分の身体の延長線上にあるような感覚で、画面の中のものを掴んだり、動かしたり、大きさを変えたりできれば、情報との関わり方が一層面白く、豊かになり、情報への親近感も深まるのではないかと考えています。これは、まるで画面の向こう側を直接『触る』ような、新しい感覚です。 そんなモチベーションのもと、指先のジェスチャーで、画面のオブジェクトを触るデモを作りました。特別な機材は不要で、普段使っているパソコンだけで手軽に実現で