はじめに 以前、mediapipeを利用した手のハンドサインを登録、検出するという記事を書きました。今回はそれをもう少し拡張して、一連の動作(ジェスチャー)で検出しようという試みです! こういったモーションキャプチャはさまざまな技術で行われていて、特に加速度センサ等を用いて測定するものなんかが多いイメージがあります。 また、認識のラグがネックになるはずなので、認識にかかる時間も計測していこうと思っています。 ではまず、イメージを掴んでもらうためにも今回作成したデモ動画を紹介します! かなり高精度でジェスチャー認識をすることができました!! 実装 今回の実装ではジェスチャーを保存して、同様のジェスチャーをした際に、それを検出してお知らせするという形にしています。 検出について 動作というものは1フレームではなく、複数フレームから構成されているため、単純な比較では動作同士を比べることは難しいで
![pythonでハンドサインのジェスチャー認識](https://cdn-ak-scissors.b.st-hatena.com/image/square/0ffba6e6b74e0abcd1bed940faa86e816e814ee0/height=288;version=1;width=512/https%3A%2F%2Fis-ai.jp%2Fwp-content%2Fuploads%2F2022%2F04%2F22481094-scaled.jpg)