Сенсор-Тех: Чарли

Устройство распознавания речи «Чарли» для независимого диалога между людьми с нарушениями слуха, слепоглухими и людьми без ограничений здоровья.

2020

Функция дистанционного общения

25 марта 2020 года фонд «Сколково» сообщил о том, что устройство распознавания речи «Чарли» на базе искусственного интеллекта от резидента фонда, компании «Сенсор-Тех», получило специальную функцию дистанционного общения. Теперь люди с нарушением слуха могут учиться и работать дистанционно. Это сделает их жизнь более комфортной в условиях пандемии коронавируса.

Например, преподаватель в институте может положить «Чарли» рядом с собой во время лекции, а студенты с нарушением слуха, подключившись к программе по специальной ссылке, будут читать расшифрованную речь лектора дома на экране смартфона или компьютера в режиме онлайн. Таким же образом можно проводить рабочие встречи, совещания, любые образовательные мероприятия или выступления. Для этого необходим лишь доступ к интернету.

Сейчас, когда очень многие переходят на режим удаленной работы и учебы, уходят на самоизоляцию, крайне важно поддержать и людей с инвалидностью. Поэтому мы в срочном порядке сделали такую функцию для «Чарли». Я и сам ей воспользуюсь в самое ближайшее время. Все мои студенты в Бауманке переведены на удаленное обучение, в инклюзивных группах очень много глухих ребят. Надеюсь, что они оценят продукт, – говорит Денис Кулешов, директор Лаборатории «Сенсор-Тех», преподаватель МГТУ им. Н.Э. Баумана

Устройство «Чарли» воспроизводит на экране расшифрованную речь в режиме онлайн, и неслышащий человек может просто прочитать то, что ему говорят, не прибегая к помощи третьих лиц. Гаджет часто устанавливают дома для общения с близкими. Он может использоваться в общественных местах: в банках, в больницах, на вокзалах. «Чарли» уже активно работает в Центре занятости населения Москвы «Моя работа». С его помощью специалисты отдела по трудоустройству инвалидов эффективно общаются с людьми, у которых нарушен слух, и помогают им найти работу. Также пилотный проект тестирования «Чарли» запущен в МФЦ Перми. Планируется, что после тестов девайс будет установлен в специальных окнах для обслуживания людей с инвалидностью.

`Чарли` - одна из самых перспективных российских разработок для людей с нарушением слуха. Теперь благодаря функции дистанционного общения устройство можно использовать и на расстоянии. А значит, неслышащие люди смогут самостоятельно читать то, что им говорят те, кого нет рядом. Особенно сейчас, во время пандемии, когда нам каждый день хочется слышать и видеть наших близких, друзей, учителей, `Чарли` поможет чувствовать себя не в полной изоляции, общаться, учиться, – говорит Щеглова Юлия, проектный менеджер кластера биомедицинских технологий Фонда «Сколково»

Технические характеристики и сценарии использования

Технические характеристики на март 2020 года:

• Быстро: Перевод речи в текст в реальном времени
• Удобно: 4 микрофона для захвата речи в «режиме 360»
• Просто: Вывод текста на ТВ-экран, планшет или Брайлевский дисплей
• Надежно: Автономная работа на протяжении всего рабочего дня

Сценарии использования:

• Персональное использование

Человек с нарушениями слуха или слепоглухой может приобрести устройство для дома. Распознанный «Чарли» текст можно будет вывести на ТВ-экран, планшет или дисплей Брайля, чтобы понять о чем говорят родственники и близкие.

• Использование в общественных местах

«Чарли» может быть установлен в общественных местах, например в банках, вокзалах, центрах социального обслуживания населения. Кроме того, такие технологии очень востребованы у благотворительных и коммерческих организаций, которые постоянно работают с людьми с нарушенным слухом.