Игровые мыши способны улавливать звуки голоса

В исследовании под названием Mic-E-Mouse описывается, как устройство может преобразовывать крошечные вибрации поверхности стола, возникающие при речи, в акустические сигналы, которые затем восстанавливаются в разборчивую речь.

Механизм работы основан на сборе необработанных данных о движениях мыши, выделении из них микроколебаний, связанных с голосом, и последующей цифровой обработке сигналов. Для снижения шумов и выделения речевых частот используется фильтр Винера, после чего нейросеть восстанавливает звуковую волну.

По результатам экспериментов, точность распознавания речи составила от 42% до 61%, что позволяет частично понять содержание разговора. Несмотря на умеренную точность, метод крайне прост в применении и не требует сложного вредоносного ПО — достаточно приложения, имеющего доступ к данным мыши.

Такие данные можно передать на внешний сервер для анализа. При этом ни одна популярная ОС — ни Windows, ни macOS, ни Linux — не ограничивает доступ к данным от мыши так строго, как к клавиатурным ввода, которые могут быть распознаны как кейлоггинг.

Пока что Mic-E-Mouse остается исключительно научным экспериментом, требующим особых условий и уже скомпрометированной системы.