Новое устройство позволяет диктовать сообщения в соцсети даже на громком концерте
Аспирант Корнеллского университета (США) Жуйдун Чжан (Ruidong Zhang) разработал оборудованные сонаром очки EchoSpeech, способные «слышать» беззвучную речь своего владельца – достаточно лицевой артикуляции. Очки могут использоваться в качестве стандартного устройства ввода. Напомним, что сонар – это прибор, применяемый для определения глубины и наличия объектов в воде путем отправки сигнала под воду и последующего приема его эха.
Новый проект автора основан на предыдущей разработке, в рамках которой он установил камеры на беспроводные наушники. Формат очков оказался для этих целей более удобным: пользователю не нужно смотреть в камеру или вставлять что-то в ухо. Данные с установленных на очки динамиков и микрофонов по беспроводному каналу передаются на смартфон, где обрабатываются алгоритмами искусственного интеллекта.
При первом использовании требуется калибровка EchoSpeech, позволяющая искусственному интеллекту изучить особенности мимики пользователя – достаточно всего нескольких минут, за которые человеку предлагается, например, зачитать небольшое количество чисел. Когда настройка завершена, точность срабатывания системы достигает 95%. Использование смартфона для обработки данных позволяет очкам оставаться компактными и ненавязчивыми, обеспечивает им до 10 ч автономной работы и гарантирует, что вся информация остается в цифровом устройстве – его производительность достаточна для локального функционирования.
На практике у EchoSpeech может быть множество самых разных применений: управление программами на персональном компьютере, беззвучное и без использования рук управление музыкальным проигрывателем, возможность диктовки сообщения на громком концерте или даже совместная работа с голосовым синтезатором для людей с нарушениями речи – они снова заговорят. Сейчас авторы проекта рассматривают пути для вывода технологий на рынок с привлечением действующей в Корнеллском университете программы финансирования.
Подготовлено OCHKI.com по материалам портала 3DNews.ru
