Приложение для тех, кто читает по губам

jpg.

Компания Яндекс решила облегчить общение глухим и слабослышащим людям с окружающим миром. Языком жестов, с помощью которого они общаются, владеют немногие. А пути инвалидов по слуху пересекаются с большим количеством слышащих людей: продавцов, медицинских работников, сотрудников различных организаций. Приходится всегда иметь при себе ручку и блокнот. Мобильное приложение от Яндекс заменит не только эти инструменты, но и чтение по губам.

Приложение "Разговор" доступно в Android-версии, оно загружается на смартфон или планшет и позволяет распознавать устную речь, переводить ее в текст и обратно.

Программа озвучивает набранный на клавиатуре текст, а чтобы общаться было проще и быстрее, есть шаблонные заготовки для стандартных случаев. Например, просьба повторить сказанное или фраза, поясняющая, что пользователь не слышит собеседника и будет общаться с ним помощью приложения. Есть возможность добавлять и собственные заготовки. Фразу можно озвучить с помощью синтезатора речи или показать собеседнику с экрана, текст можно увеличить, чтобы прочитать его мог даже человек с плохим зрением.

История бесед сохраняется в приложении, пользователь может "выдергивать" нужные фразы и добавлять их в шаблоны. Во время разговора сказанные реплики не стираются, а остаются на экране, как при ведении переписки, что очень удобно, скажем, когда человек уточняет, как пройти куда-либо, и может легко сверяться с полученными рекомендациями.

"Разговор" пока далек от совершенства, поскольку находится в стадии разработки. Для работы приложению нужно интернет-соединение, а чтобы речь распознавалась корректно, нужно говорить медленно, громко и разборчиво. А вокруг не должно быть лишних шумов. Говорить должен только один человек. В основе приложения "Разговор" технология распознавания речи Yandex SpeechKit.

Источник: Агентство по инновациям и развитию