Top.Mail.Ru
Новости

Китайские разработчики создали приложение для распознавания беззвучной речи

Новости
Анна Полякова
Анна Полякова

Редактор (RB)

Анна Полякова

Китайские разработчики создали приложение, распознающее беззвучную речь по движениям губ пользователя. Об этом сообщает N+1.

Китайские разработчики создали приложение для распознавания беззвучной речи

Приложение отслеживает положение 20 контрольных точек, которые достаточно точно передают движения губ, отмечает издание. Оно также определяет степень открытости рта, что позволяет фиксировать начало и конец команды.

Пример создания контрольных точек

Эти данные передаются другому алгоритму нейросети, который занимается непосредственно распознаванием речи по движениям губ. Приложение разрабатывают для смартфонов, но пока оно работает только на компьютере, добавляет N+1.

Авторы приложения разработали для сервиса 44 команды. Часть из них относится ко всей системе, например, включает Wi-Fi, часть регулирует работу конкретных приложений. Еще часть команд позволяет взаимодействовать с любым приложением с помощью системных служб, например, выделять текст.

При этом приложение понимает контекст команд — если система отобразила всплывающее окно с сообщением, то пользователь сможет быстро ответить на него.

Нашли опечатку? Выделите текст и нажмите Ctrl + Enter

Материалы по теме

  1. 1 «Проклятие 35 лет»: почему китайские технологические компании нанимают только молодежь
  2. 2 Сенат США одобрил закон о продаже или блокировке TikTok в стране
  3. 3 Дальний Восток: как стать экспортёром
  4. 4 Китайские автомобили. Как будет работать параллельный импорт после 1 апреля 2024 года?
  5. 5 Честный знак при карго-доставке из Китая: «серые» схемы и их последствия
DION
Что ждет рынок корпоративных коммуникаций в 2024 году?
Подробнее