スマホの“カメラ部品の揺れ”から周囲の音を盗聴する攻撃 マイクは不要 米国の研究者らが実証

Innovative Tech： このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: ＠shiropen2 米ミシガン大学、米フロリダ大学、米ノースイースタン大学に所属する研究者らが発表した論文「Side Eye: Characterizing the Limits of POV Acoustic Eavesdropping from Smartphone Cameras with Rolling Shutters and Movable Lenses」は、音波によって揺れるスマートフォンのカメラ部品から音声を復元する研究報告である。 スマートフォンのマイクにアクセスできない場合でも、スマートフォンアプリを使用して音声を盗聴できる方法となる。 膜を前後に素早

[amd64x64]

音の周波数対してフレームレートが低すぎるのでは。

[deep_one]

理屈はわかるが。／「10桁の数字の分類で80.66％の精度、20人のスピーカーの分類で91.28％の精度、性別分類で99.67％の精度が確認された」実験の内容がよくわからん。スピーカーの分類？

[ttrr]

ローリング現象を使うという話ぽい（細かくは未読）

[eagleyama]

“HuBERT（Hidden-unit Bidirectional Encoder Representation from Transformers）というニューラルネットワーク変換器を使って信号から音声に変換

[and_hyphen]

理屈はなんとなく分かるがそんなので拾えるのかよ、という気持ち

[nezuku]

光学手ブレ補正や電子式手ぶれ補正で、その揺れが吸収されたりしないのかな?

[cinefuk]

trojanの機能として実用されてそう「カメラはどこに向けておいてもよく、何もない天井や床を捉えていても機能する。音波によってカメラの小さな機械部品が揺れ、それがカメラの映像に小さな変化として現れる」

[ume-y]

悪意のあるカメラアプリで、こういうことができるということかしら。

[versatile]

精度たけぇぇ

[imwks]

tiktokアプリ禁止の理由にはなる

[spam_lover]

テルミンの盗聴器やん

[greenbow]

物理的に振動してるんだから影響があってもおかしくはないけどそんなこと可能なのか。

[fnskun]

“前提条件として、スマートフォンのマイクはOFFにしておいていいが、カメラをONにしておく必要がある。カメラはどこに向けておいてもよく、何もない天井や床を捉えていても機能する。”

[Seamless]

音が空気中を伝搬しスマホにぶつかると微小に振動する。カメラONにしておくとカメラの部品(可動レンズ等)が揺れ画像が揺れる。この揺れから学習モデルで元の音声に変換し盗聴する。

[IGA-OS]

なるほど色々と考えるもんだ🤔