カフェなどの公共の場所で、スマートフォンの画面を隠してパスワードを入力していても、眼鏡型のカメラで指の動きを撮影されると推測されてしまう可能性があることがわかりました。イスラエルのテルアビブ大学の研究者たちが、スマートグラスの動画からパスワードを解読する手法を実証した研究を発表しました。
普通の眼鏡に見える「Meta Ray-Ban」などのスマートグラスは、向かいの席や立った状態から手元を撮られても、撮影されていることに気づきにくいのが特徴です。のぞき見を防ぐフィルムなどで画面を隠したり、後ろからの視線に気をつけていたりしても、前方から指の動きを録画されるだけでパスワードが破られる危険があります。
この手法では、AIで指先の位置を細かく追い、キーを押した瞬間を特定します。間違えた文字を消すバックスペースの操作も、自動で除外されます。さらに、大文字や数字に切り替えるキーの位置からキーボードの場所を計算し、過去に流出した約22億件のパスワードのデータと組み合わせて正解の候補を絞り込みます。相手のスマートフォンの機種やキーボードのアプリをあらかじめ知らなくても推定できるということです。
実験では、Pixel 10やiPhone 16、Galaxy A53といったスマートフォンのすべてで効果が確認され、最大で1.8メートル離れた場所からでもパスワードを推測できました。16人が参加したテストでは、全体の77.8%でキーを押した回数の特定に成功しています。一方で、指を小さく動かしてとても速く打つ若い人や、迷いながら打つ人、両方の親指でほぼ同時に打つ人などの場合は、推測の精度が落ちるという限界も明らかになりました。