Конкурсные проекты 2025 года продолжают удивлять своим новаторством и применением передовых технологий. Одним из ярких примеров является система трансляции и анализа русского жестового языка, созданная Даниилом Голотовским.

В основе разработки лежит объединение возможностей компьютерного зрения и лингвистической обработки. Проект представляет собой веб-платформу, которая, получая видеосигнал с камеры, выделяет и классифицирует жесты, используя модель Multiscale Vision Transformer v2. Затем происходит сглаживание результатов и их преобразование в текстовые предложения посредством языковой модели RuT5-base-multitask. Система располагает базой данных с тысячей видеопримеров жестов для обучения пользователей.

Стартап направлен на:

• расширение цифровой доступности: Система обеспечивает возможность полноценного взаимодействия людей с нарушениями слуха с цифровыми ресурсами, зачастую не адаптированными для жестового языка.

• содействие социальной интеграции: Разработка снижает коммуникационные барьеры между слышащими и неслышащими людьми, облегчая трудоустройство, обучение и повседневное общение.

• улучшение качества жизни: Платформа открывает новые возможности для получения образования, медицинских и государственных услуг, делая их более удобными для людей с нарушениями слуха.

• поддержку культурного наследия: Русский жестовый язык – уникальная система, являющаяся частью культуры сообщества глухих. Разработка технологий перевода способствует его сохранению и распространению.

«Мой проект особенно важен для повышения цифровой доступности для людей с нарушениями слуха, которых в России около 150 тысяч. Отсутствие автоматизированных решений для перевода русского жестового языка в текст усложняет получение образования, трудоустройство и социальную адаптацию. Предлагаемая мной разработка направлена на решение данной проблемы, поскольку автоматический перевод позволяет общаться без сурдопереводчика, что принципиально важно в различных ситуациях. По данным Минтруда, только 5% государственных онлайн-сервисов поддерживают русский жестовой язык», – отметил Данил Голотовский.

Несмотря на то, что проект находится на стадии разработки, автор имеет амбициозные планы, в числе которых::

• Совершенствование обработки динамических жестов

• Интеграция с мультимодальными данными(видео + аудио)

• Создание мобильного приложения для распознавания жестов

Это социально значимая разработка, которая поможет комфортно взаимодействовать  людям с нарушениями слуха в обществе.

Пожелаем Данилу успехов в конкурсе и дальнейшей реализации своего проекта.

Ознакомится с работой можно на сайте конкурса: https://www.project.it-alttpp.ru/projects/2025/detail/1976/.