Новость
Компания «Сенсор-Тех» совместно со студией «Союзмультфильм» разрабатывает виртуального сурдопереводчика, который в режиме 24/7 будет помогать глухим и слабослышащим людям. Разработка ведется в рамках проекта «Сурдо-помощь», реализуемого на грант РФРИТ.
Виртуальный сурдопереводчик генерирует русский жестовый язык на основе введенного текста или записанного голоса. Сервис разработан с помощью технологии «motion capture» на базе искусственного интеллекта, который был обучен на основе собранного датасета из более чем 50 тыс. жестов.
Виртуальный переводчик - одна из функций, которая будет доступна в ПО.
Всего в цифровую платформу будут интегрированы три функции: перевод речи в текст, виртуальный сурдоперевод и видеосвязь с реальным сурдопереводчиком.
ПО распознает устную речь, переведет ее в текст, и выведет в виде субтитров на экран смартфона. Пользователь сможет напечатать ответ текстом, а программа озвучит его, переформатировав в устную речь для собеседника.
В случае необходимости получения консультаций, а также в экстренных ситуациях поможет функция видеоконференции, с помощью которой пользователь может связаться с переводчиком русского жестового языка в любое время суток.
Платформа будет доступна в виде веб-портала и мобильного приложения для iOS и Android в 2024 году.
«Сурдо-помощь» использует API только российских разработчиков (ЦРТ, Яндекс, Труконф), а также впервые в мире задействует алгоритмы deepfake для генерации виртуального сурдопереводчика, неотличимого от реального человека.
Продукт будет способствовать развитию цифровых инструментов для социальной адаптации людей с нарушениями слуха: они смогут самостоятельно посещать общественные места, общаться, получать образование, путешествовать и найти работу.
Проект вошел в ТОП-1000 Форума «Сильные идеи для нового времени» и был представлен на ПМЭФ-2023.
Среди потенциальных заказчиков Всероссийское общество глухих, Фонд социального страхования, ГК «Исток Аудио», ООО «Бизнес Бюро».
Другие новости
-
Пятница, 20.06.25
Грантополучатели РФРИТ приняли участие в ПМЭФ-2025
#Новость -
Вторник, 17.06.25
ВГТРК переведет радиокомплексы на российское оборудование и ПО
#Новость #Гранты -
Понедельник, 09.06.25
«КОРУС Консалтинг» расширил возможности логистической платформы
#Новость -
Пятница, 06.06.25
На заводе «ДСТ-УРАЛ» появится «Индустриальный ассистент»
#Новость #Гранты -
Пятница, 06.06.25
Топливная компания Росатома перейдет на российскую систему предиктивной …
#Новость #Гранты -
Пятница, 06.06.25
«СМАРТС» и МАДИ провели аудит умных дорог в …
#Новость -
Четверг, 05.06.25
«РНГ-Инжиниринг» запускает проект по улучшению управления производством
#Новость #Гранты -
Четверг, 05.06.25
ГК «Росатом» внедрит российскую систему НСИ
#Новость #Гранты -
Четверг, 05.06.25
Грантополучатели РФРИТ приняли участие в мероприятиях ЦИПР-2025
#Новость -
Четверг, 05.06.25
На площадке Нижегородского автозавода стартует проект при поддержке …
#Новость #Гранты