Разработана автоматическая компьютерная система, способная читать по губам
Программисты из Университета Восточной Англии разработали компьютерную систему, способную распознавать речь по видеозаписи движения губ. Система может помочь при расследовании преступлений или различных происшествий – особенно в тех, случаях, когда аудиодорожка отсутствует, оказывается повреждена или является бесполезной из-за фонового шума.
Видеозаписи в местах развлечений, в автомобилях или кабинах самолётов и других транспортных средств, делаются без аудиодорожки, либо аудио содержит слишком много шума. В сложных случаях следователи приглашают специалиста по чтению по губам – обычно это глухие люди, или те, кто работает с глухими.
Чтение по губам – более сложная задача, чем распознавание речи, как для человека, так и для компьютера. Некоторые буквы, особенно гласные, хорошо распознаются при их произнесении. Некоторые (например: к, г, х) вообще «не видны» снаружи. Опытный человек, распознающий речь, подбирает подходящие слова и достраивает предложения по смыслу.
«Пока что мы ещё только постигаем науку распознавания визуальной речи и того, что необходимо для создания надёжной системы распознавания»,- говорит Хелен Беар [Helen L. Bear], одна из создателей системы.
«Чтение по губам – одна из самых сложных задач для искусственного интеллекта, поэтому так здорово совершать прогресс в этой области в таких сложных вещах, как обучение машины распознаванию внешнего вида и формы губ человека»,- поясняет Ричард Харви [Richard Harvey], профессор, участвовавший в создании системы.
Один час без ИИ-агентов: путь от токенов до MCP
Некоторые загадки современной космологии
Как собирают данные для обучения роботов: от телеуправления и симуляций до камер на кепках
Как проверенные временем паровое и водяное отопление работают в современных небоскрёбах?
Старые технологии, которые не прижились: странные изобретения прошлого. Часть 5
Электронный микроскоп: прибор, позволяющий разглядеть атомы
Как распознать психопата по тексту: тёмные черты личности отражаются в нашей речи