В России появился первый общественный IT-сервис для общения глухого человека со слышащим.
Подобных решений в стране еще не было: люди с нарушениями слуха должны были использовать несколько программ, приложений, договариваться о сопровождении сурдопереводчика и платить за это.
«Сурдо-помощь» работает на базе искусственного интеллекта. Система позволяет перевести речь в текст и показать слабослышащему, что говорит его собеседник, в виде субтитров.
Также ИИ может мгновенно генерировать виртуального помощника – сурдопереводчицу Дашу. Специалисты «Сенсор-Теха» с помощью технологии захвата движения обучили ее более 150 000 жестов. Их кропотливо создавали более года, и теперь это самая крупная база в России. Даша может в любой момент перевести речь на язык жестов синхронно с говорящим.
Если ситуация сложная и требует помощи реального специалиста, то пользователь может позвонить по видеосвязи профессиональному сурдопереводчику. Эта функция удобна, чтобы пройти прием врача, получить услугу в МФЦ, консультацию в магазине или подсказки в аэропортах и на вокзалах, а также в экстренных ситуациях.
«Сурдо-помощь» работает в виде мобильного приложения (для IOS и Android) и в виде веб-приложения.
О «Сенсор-Техе»
Лаборатория «Сенсор-Тех» была основана в 2016 году при поддержке «Фонда поддержки слепоглухих «Со-единение». Цель проекта – разработка технологических решений для социализации людей с нарушениями слуха и зрения, в том числе слепоглухих, в России.
Тематика исследований и разработок Лаборатории охватывает широкий спектр направлений науки и техники, в том числе биоинженерию, биотехнические системы, наноэлектронику и электротехнику, информационно-коммуникационные системы, неврологию и нейрофизиологию, генетику.
Среди проектов Лаборатории «Сенсор-Тех»: нейроимпланты ELVIS, которые способны возвращать зрение слепым и слух глухим, «умная» камера Робин, которая помогает слепым ориентироваться в пространстве (включена в Перечень ТСР и выдается детям-инвалидам бесплатно с 2023 года), офтальмологический VR-симулятор See My World, имитирующий различные нарушения зрения, устройство распознавания речи «Чарли», электронный мяч для незрячих спортсменов Soundball и др.
Резидент Фонда «Сколково» и Московского инновационного кластера.
Сервис «Сурдо-помощь» поддержан форумом «Сильные идеи для нового времени» Агентства стратегических инициатив. Проект также поддержала компания NIVEA.