筑波大学、聴覚障害者向けに相手の発言をAR的に吹き出し形式でテキスト表示するシースルー型HMDシステムを論文にて発表。環境雑音下や複数話者からでも正確に音声を取得

筑波大学、聴覚障害者向けに相手の発言をAR的に吹き出し形式でテキスト表示するシースルー型HMDシステムを論文にて発表。環境雑音下や複数話者からでも正確に音声を取得 2018-01-09 筑波大学の知覚拡張システム研究室は、聴覚障害者向けに相手の会話情報をAR的に視覚化するシースルー型HMDシステムを論文にて発表しました。 Speech Balloon System Using Single-Channel Microphone Array on See-Through Head-Mounted Display 著者：Keiichi Zempo、Tomoki Kurahashi、Koichi Mizutani、Naoto Wakatsuki 本稿は、シースルー型HMD（本稿ではMicrosoft Hololensを使用）、マイクロフォンアレイ、音声認識エンジンからなる字幕支援システムを提案し

[crema]

これ欲しい。ついでにその人のSNSアカウントを、右上に表示して欲しい！

[suika3417]

道路とか歩いてたら色んな人から吹き出しが出てくるのかな？

[su_zu_ki_1010]

凄いって思ったけど、聞き取りたい話者の方向を見ないといけないのは地味に厳しい。会議とかセミナーでの質疑応答時に、誰が話しているのかわからないと特定できない。まぁこの辺りは技術の発展でどうにかなるかなー