Использование голосового помощника на смартфоне - это не всегда комфортно по этическим соображениям, особенно в общественных местах.
Как не надоедать окружающим голосовыми командами? Есть несколько способов.
Китайские специалисты из Университета Цинхуа разработали приложение, которое умеет распознавать речь по движениям губ, даже если пользователь вслух ничего не произносит. Этот голосовой помощник, получив с камеры смартфона изображение лица его владельца, начинает отслеживать положение 20 контрольных точек, которые достаточно точно описывают форму губ. А по степени открытости рта он определяет моменты начала и конца команды. После этого данные передаются на другой алгоритм, работающий по принципу нейросети, который занимается непосредственно распознаванием речи по движениям губ. Пока приложение способно понять 44 беззвучные команды с точностью их распознавания 95,5 процента.
Но китайцы не единственные, кто работает в этом направлении. Так, инженеры из Массачусетского технологического института разработали закрепляемую на шее гарнитуру, которая регистрирует изменения сигналов нейромышечной активности, когда пользователь говорит, не открывая рта.
Валерий Мальчев.
Фото Pixabay.com