Учёные создали нейросеть для перевода языка жестов в текст

00:00:00
1 минута
Учёные создали нейросеть для перевода языка жестов в текст
Фото: pixabay com

Учёные из России создали нейросеть, которая переводит язык жестов в текст, отображаемый на экране.
Пока она поможет пациентам общаться с медиками и получать необходимую медицинскую помощь. А затем её планируется использовать и в других жизненных ситуациях.

Пользователями этого новшества станут глухие люди. Сейчас они вынуждены обращаться к сурдопереводчикам, но таких специалистов хватает не всегда.

Приложение разработали специалисты из подведомственного Минобрнауки России Санкт-Петербургского Федерального исследовательского центра (СПб ФИЦ) РАН.

Толчком стало обращение к ним представителей одной из организаций, занимающейся реабилитацией глухих людей. Они пожаловались на проблему таких граждан с посещением поликлиник.

Для обучения нейросети учёные смогли создать уникальную базу данных жестов, используемых глухими людьми. Пока в ней содержится 85 жестовых высказываний, озвученных 12 дикторами, связанных с медициной и здоровьем.

Общая продолжительность видеозаписей составляет почти семь часов.

Интересное по теме

31 октября 2022

«Адаптис» и НГТУ представили анимированный аватар синхронного перевода на русский жестовый язык

Первый в стране цифровой аватар, осуществляющий синхронный перевод на русский жестовый язык, разработали специалисты инновационной компании «Адаптис» 
слухопротезирование Москва