В США школьники разработали ИИ-переводчик с языка жестов
Двое старшеклассников из Техас — Шивен Велагапуди и Аади Сангви — создали ИИ-сервис Hand Wave для перевода американского языка жестов в режиме реального времени.
Система использует умные очки со встроенной камерой. Алгоритм отслеживает движения рук и пальцев, после чего переводит жесты в текст или речь.
Как работает Hand Wave
- камера считывает движения рук собеседника
- ИИ анализирует положение пальцев и кистей
- система сопоставляет жесты с базой данных
- перевод отображается в тексте или озвучивается пользователю
По словам разработчиков, человек сможет слышать перевод прямо во время разговора.
Почему школьники занялись проектом
Идея появилась из личного опыта. У дяди Аади Сангви проблемы со слухом, а отец Шивена Велагапуди потерял слух на одно ухо. Подростки решили создать технологию, которая поможет слышащим людям легче общаться с глухими и слабослышащими собеседниками.
Что известно о проекте сейчас
Hand Wave пока находится на стадии разработки. Школьники работают над проектом дома и обучают модель распознавать отдельные буквы, слова и фразы.
Разработчики надеются, что смогут превратить проект в полноценный продукт после получения финансирования.
Почему это важно
По данным ВОЗ, более 430 млн человек в мире нуждаются в помощи из-за потери слуха. К 2050 году эта цифра может превысить 700 млн.
Эксперты считают, что подобные ИИ-сервисы могут помочь людям с нарушениями слуха в учебе, работе и повседневном общении.
Главная сложность
Hand Wave работает только с американским языком жестов. Для других стран систему придется обучать отдельно, поскольку в мире существует более 200 разных жестовых языков.