Яндекс.Метрика
  • Полина Яук

Петербургские ученые создали приложение, преобразовывающее жесты слабослышащих людей в текст

Это поможет врачам общаться с такими пациентами без переводчика
Фото: Роман Пименов/«Петербургский дневник»

Ученые Санкт-Петербургского Федерального исследовательского центра РАН (СПб ФИЦ РАН) разработали интеллектуальную систему для работы с глухими пациентами. Специалисты придумали программу, которая распознает жестовый язык и преобразовывает его в текст. Об этом в среду, 1 февраля, сообщает «Вечерка».

«К нам обратились представители одной из организаций для реабилитации глухих людей с проблемой посещения больниц. Для того, чтобы подробно объяснить свой недуг, глухой пациент вынужден брать с собой переводчика, которых часто не хватает. Для решения этой задачи мы разработали программное обеспечение, которое распознает язык жестов и преобразует его в текст», – рассказал старший научный сотрудник Лаборатории речевых и многомодальных интерфейсов СПб ФИЦ РАН, кандидат технических наук Дмитрий Рюмин.

Чтобы нейросеть могла понимать глухих людей, ученые разработали базу данных жестов, которые связаны с медициной. Она включает в себя 85 жестовых выражений. Точность системы оценивается в 90%.

«Мы надеемся, что в перспективе наше приложение позволит упростить оказание медицинских услуг и для врачей, и для людей с ограниченными возможностями. Сейчас мы работаем над созданием удобного интерфейса для программы», – добавил Дмитрий Рюмин.

Ранее «Петербургский дневник» писал о том, как в Петербурге прошли мероприятия в честь Международной недели глухих.