ИИ научился распознавать данные через анализ звука нажатия клавиш

Итак, на первоначальном этапе обучения ИИ ученые «прорабатывали» все из 36 клавиш (в том числе и цифры) на MacBook Pro 25 раз подряд, применяя к нажатиям разную механическую силу.

Сопутствующие звуки записывались на смартфон и во время вызова в Zoom. Таким образом были получены осциллограммы и спектрограммы, которые и позволили выявить уникальные отличия после нажатия той или иной клавиши.

Лирическое отступление: *Твое лицо, когда ты думал, что все клавиши отжимаются с одинаковым звуком…

Полученные данные были переданы системе машинного обучения – так со временем ей удалось распознать все идентифицирующие акустические особенности сигналов каждой клавиши.

Следом искусственный интеллект продемонстрировал устойчивые позитивные результаты: точность анализа записи звуков со смартфона (гаджет при записи нажатий находился на небольшом расстоянии от ПК) достигает 95%, распознавания данных от звонка в Zoom – 93%. Тестирование идентичной практики с использованием Skype продемонстрировало результат в 91,7%.

Зачем вообще проводилось исследование? Авторы утверждают, что тест наглядно показал, какая угроза конфиденциальности и безопасности данных кроется за способностями обучаемого алгоритма. Как минимум, метод можно использовать для кражи личных паролей.

Источник: Techspot.