Алиса стала лучше воспринимать голосовые запросы от людей с нарушениями речи, как сообщила пресс-служба Яндекса изданию «Код Дурова».
Речь идет о таких нарушениях, как заикание, ДЦП, последствия инсульта или травмы. Взаимодействие с голосовым помощником стало проще благодаря дообучению нейросети: утверждается, что Алисе было предоставлено множество аудиозаписей для повышения точности распознавания.
- Для обучения Алисы использовались аудиозаписи, подготовленные людьми с особыми речевыми потребностями. Яндекс привлёк их к открытому тестированию качества распознавания речи, в том числе при поддержке партнерских организаций.
- В проекте приняли участие такие некоммерческие организации, как «Центр лечебной педагогики», «Живи сейчас», «Жизненный путь», «Весна», «Перспектива», «Лучшие друзья» и другие.
- По данным Яндекса, участники из этих организаций и другие волонтёры создали более 855 000 аудиозаписей, включая скороговорки и фрагменты обычной речи, что составляет более 900 часов аудиоматериала.
Как сообщили в компании, в результате дообучения нейросети разрыв в точности распознавания речи с нормальными и искаженными характеристиками сократился в среднем на 20%. Качество распознавания оценивалось по метрике Word Error Rate, которая измеряет долю неправильно понятых слов:
Классификацией примеров по типам нарушений занимались дефектологи из МГПУ. В целом, в проекте участвовало более 300 человек. Подробнее об этом можно прочитать на Хабре.
В Яндексе также подчеркнули, что инклюзивность и цифровая доступность являются ключевыми направлениями социальных инициатив компании. На данный момент в экосистеме Яндекса адаптировано 15 сервисов и продуктов для незрячих пользователей.