Наука и технологии

Исследователи создали очки-сонары, которые отслеживают движения лица для бесшумной коммуникации

Прототип считывает бесшумные команды с точностью около 95 процентов.

Фото: Ruidong Zhang / Cornell University

Исследователь и аспирант из Cornell University Руидонг Жанг разработал очки-сонары, которые «слышат» вас, даже если вы бесшумно шевелите губами, почти не говоря вслух. Установленные на очках крошечные микрофоны и динамики позволяют, например, отдавать команду приостановить или пропустить музыкальную композицию, вводить пароли без использования клавиатуры или работать в некоторых программах без необходимости мануального ввода данных.

Системе требуется всего несколько минут учебных данных (например, чтение серии цифр), чтобы изучить речевые образцы пользователя. Затем, как только девайс готов к работе, он отправляет и принимает звуковые волны, считывая движения губ и используя при этом алгоритм глубокого обучения для анализа эхо-профилей в режиме реального времени «примерно с 95-процентной точностью».

При этом обработка данных происходит на вашем смартфоне (по беспроводной связи), сообщает Engaget. Это позволяет устройству иметь небольшой размер. Текущая версия предлагает около 10 часов автономной работы. Кроме того, утверждается, что никакие данные не покидают ваш телефон, устраняя опасения, связанные с конфиденциальностью.

Действительно конфиденциальность данных здесь представляет собой важный фактор, если рассматривать потенциальное использование устройства в реальном мире. Создатель предлагает использовать такие очки, например, для управления воспроизведением музыки (без использования рук и глаз) в тихой библиотеке или для диктовки сообщения на громком концерте, где стандартные варианты ввода текста не очень удобны.

Но, пожалуй, самая захватывающая перспектива — это использование изобретения людьми с нарушениями речи для беззвучной передачи слов в голосовой синтезатор, который может потом произносить слова громко и вслух.

Фото: Ruidong Zhang / Cornell University

Сейчас команда Cornell's Smart Computer Interfaces for Future Interactions Lab изучает коммерциализацию этой технологии с помощью программы финансирования Cornell. Они также рассматривают приложения для умных очков для отслеживания движений лица, глаз и верхней части тела. Исследователи считают, что «стекло будет важной персональной вычислительной платформой для понимания деятельности человека в ежедневных условиях»»

Комментарии

«У сына на телефоне были наклеены флаг и герб России. С этого все началось». Отец школьника из Барановичей рассказал, как его сына травили одноклассники40

«У сына на телефоне были наклеены флаг и герб России. С этого все началось». Отец школьника из Барановичей рассказал, как его сына травили одноклассники

Все новости →
Все новости

Новая модель GPT-6 Astra просто взяла и прошла все 48 уровней капчи «Я не робот»2

Уиткоффу и Кушнеру предлагали прилететь в Беларусь и ехать в Украину из Гомеля. Но они не захотели5

Венгрия высылает сразу 10 российских дипломатов. Такого раньше не было1

«Сотни курдов рассказывают о связи с дочерью премьера Курдистана. И только 1% заявлений на убежище от мигрантов в Британии действительны»19

«Гели переливают в разные бутылки — от йогуртов или от кефира». Как и что покупают и продают белорусы на польском рынке в Белостоке2

Белорусов пригласили делать пусконаладку на первой турецкой АЭС6

В Швеции задержали белоруса — он фотографировал охраняемые объекты. Там производят ракеты и боеприпасы2

Анджелина Джоли посетила боксерский клуб в Харькове2

Россияне атакуют пассажирские поезда в Украине7

больш чытаных навін
больш лайканых навін

«У сына на телефоне были наклеены флаг и герб России. С этого все началось». Отец школьника из Барановичей рассказал, как его сына травили одноклассники40

«У сына на телефоне были наклеены флаг и герб России. С этого все началось». Отец школьника из Барановичей рассказал, как его сына травили одноклассники

Главное
Все новости →

Заўвага:

 

 

 

 

Закрыць Паведаміць