口パクで音声入力、喉に小型センサーで 東大とソニーCSLが技術開発

Innovative Tech： このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 東京大学大学院情報学環とソニーコンピュータサイエンス研究所（CSL）の研究チームが開発した「Derma」は、喉周辺の皮膚にセンサーを張り付け、口パク（無声発話）を音声入力に変換する深層学習を用いたサイレントスピーチインタラクション（Silent Speech Interaction、SSI） だ。 話者の唇や顎（あご）周辺を指で触れ、発話を読み取ろうとする、視聴覚障害者のためのTadoma（触診リップリーディング）法から発想を得ている。Tadoma法では主に唇周辺の皮膚を触って発話を認識しているが、今回の研究ではそれを機械学習により自動化した。さらにウェアラブルでの利用を想定し、より目立ち

[htnmiki]

つんくが歌える日を待ち望んでいる

[KoshianX]

え、これすごくない。なんかで声が出せなくなっても声が作れるってことよな。音声認識のサポートにも使えたりしないかしらねえ。

[otihateten3510]

わい「（ファミチキください）」　店員「ファミチキおひとつですね」　わい「神対応でした」

[gabill]

将来、音声入力はこういう無・音声入力にとって変わられると思う。いくら音声入力が楽でも、街中で「OK Google、最寄りのコンビニを教えて」と喋るのには少し抵抗がある。音声でLINE送るとなると尚更。

[develtaro]

一度スマホのインカメの画像と機械学習で同じことできないかと試してみたが断念した。画像だけだと母音は判別できても子音がマジ無理

[pptppc2]

人魚姫「魔女に声奪われたけどこれで問題ないわｗｗｗ」

[stp7]

読唇術だ！

[kisiritooru]

……きこえますか…きこえますか…Dermaさん……

[yooks]

声を出した経験があって声を亡くした人なら、発声できるようになるのか？！

[c_shiika]

これつけて喋った内容をリアルタイムで文字出力して難聴者に読んでもらえば、手話ができなくても会話がスムースにできるようになるかな？

[adsty]

無声発話を音声入力に変換する深層学習を用いたサイレントスピーチインタラクション。

[yoiIT]

応用すれば、地声を出さずに自分の好きな声色に変えて音を出すこともできそう。

[ipinkcat]

すごい技術だ。

[anus3710223]

相模原の殺人鬼さん、世の中にはこんな技術もあるんですよ

[soraboby]

そういうラノベあったような。製品化が楽しみ。

[hazime2914]

これ付けたら自分が全然正しく発声できてないのに気付いてしまいそう。

[momonga_dash]

無声発話っての一般形がよくわからんのだけど、万人に使える学習データなんだろうか。

[zapperd]

声帯を失った人でもいけるなら凄く画期的だと思う

[karukaru7]

何故かジョジョが思い浮かんだ。

[atsushifx]

ゾラックに一歩近づいた

[bigchu]

口パクセンサー

[Nyoho]

以前アルターエゴというぶちくそかっこいい名前でこういう研究があった気がするけど、どちらも実用化が楽しみ。

[takeim]

DCExpo でみたやつだ。

[amazedkoumei]

すごい

[klaps]

windowsはなぜ音声入力の精度をもっと上げないの？お前ら給料泥棒か？

[srgy]

腹話術のような特殊な発声方法を会得して、肉声では○○と言ってるけどDermaには××と入力されてる…みたいなことができたら推理小説のトリックに使えそう

[msiyss]

世にも奇妙なの題材になりそう。電脳ハックで言ってもないことを言わされそう。ワクワクする

[anklelab]

すごい。元から声が出せない人でも、フィードバックを受けながら学習できそう？

[tomono-blog]

胃ろうとかの重病者に応用できるといいですね。

[cucumisin]

良い。これ、普通に喋れるけど騒がしくて意思疎通が大変、みたいな環境でも結構有効なのでは。工事現場とかそういう。

[privates]

これ、被験者って誰？声が出せない人って、俺らと同じ仕組みで「のどが震える」「顎が動く」の？発声って体験と記憶だと思ったが。元から声が無い人と、途中で声を無くした人のアプローチは違う気がします。

[rainbow_doll]

（いまやってみたけど、けっこうつかれてすとれすたまる）

[imash]

独り言が漏洩しちゃいそうで油断できないな

[kibojin]

あれ、文字が、遅れて、入力されてるよ

[motti0804]

音声入力の弱点が消えて、圧倒的な入力スピードをどこでも得られる。早く欲しいなあ。

[peketamin]

継続的に開発されてて期待してる。キーボードが見えない状態でかつ大声が出せない状況で効率的にメモ取りたい時がある

[udukishin]

声帯が損傷した人を救う素晴らしい技術。あとこれで外でも音声入力できるようになるな！

[rajahbrooke]

時代が阿笠博士に追いついた