Помощь глухим: как стартап из Пуны использует ИИ, чтобы дать голос на языке жестов

00:00:00
2 минуты
Помощь глухим: как стартап из Пуны использует ИИ, чтобы дать голос на языке жестов
Фото: moneycontrol com

По данным Всемирной организации здравоохранения (ВОЗ), почти 63 миллиона индийцев страдают от серьезных нарушений слуха, или, другими словами, являются глухими или слабослышащими. Общение с ними осуществляется с помощью переводчиков (через язык жестов) или происходит письменно, что опять-таки не оптимально.

Чтобы устранить этот пробел в общении, стартап Glovatrix из Пуны разработал перчатки, которые используют искусственный интеллект для перевода языка жестов в голос.
Для этого стартап обучает собственный алгоритм на основе наборов данных, которые он строит с нуля.

Чтобы обучить этот уникальный набор данных, Glovatrix, чье нынешнее количество сотрудников составляет три человека, включая двух соучредителей, записывает жест на языке жестов 50 раз, затем отслеживает данные, поступающие от этих 50 жестов, и обучает ИИ на этих данных, сказал ПарикшитСохони, сооснователь стартапа.

Перчатки, находящиеся на седьмой стадии разработки, оснащены встроенными датчиками. Алгоритм искусственного интеллекта находится в облаке.
 Приложение, разработанное стартапом, работает как шлюз между алгоритмом искусственного интеллекта и датчиками в перчатке, пояснил Сохони.

Скриншот 01.04.24_20.58.33.jpg


Журналистам была продемонстрирована технология вживую во время недавнего мероприятия Startup Mahakumbh в Нью-Дели. Во время демонстрации Сохони, который был в перчатках, сказал: «Привет, как дела?» на языке жестов, который был правильно переведен в голос через приложение.

Однако это еще не все, что Glovatrix стремится сделать со своими перчатками с поддержкой искусственного интеллекта.
 «То, что мы делаем, по сути, обеспечивает двустороннюю связь для глухих. Если я глухой, я буду использовать язык жестов, перчатки преобразуют его в речь. Но всякий раз, когда вы что-то говорите, будут установлены микрофоны и модифицированный экран»  к перчаткам, которые смогут переводить голос в текст или изображение", - сказал он.

В дальнейшем Glovatrix планирует нанять 10 глухих людей для записи большего количества жестов.

«Мы будем нанимать глухих людей разного роста и пола, чтобы уловить разнообразие одного и того же жеста», — пояснил он.

Стартап, который разрабатывал продукт в течение последних трех лет, получил финансирование в размере 75 лакхов рупий за счет государственных грантов и так далее. Первоначально компания планирует позиционировать устройство как инструмент коммуникации на рабочем месте.

«В индийском языке жестов 20 000 жестов, и мы не можем учесть их все. Но когда вы смотрите на конкретное рабочее место, например, в сфере розничной торговли или гостеприимства, то, если человек работает в отеле, ему приходится взаимодействовать с его коллеги, менеджер, клиенты, заказчики. Итак, около 400-500 жестов достаточно, чтобы они могли общаться на этом конкретном рабочем месте, мы просто запишем эти жесты и развернем».

В дальнейшем Сохони планирует привести перчатки в порядок. «Если вы видите сейчас, то создается впечатление, что мы сшили все эти вещи своими руками, и повсюду широко используется клей, чтобы соединить их вместе. Внешний вид и продукты должны быть лучше».

Glovatrix была основана в 2020 году Сохони, ранее работавшим специалистом по данным, и Айшварией Карнатаки, инженером-электриком.


Интересное по теме

слухопротезирование Москва