Ученые из Новосибирска разработали программное обеспечение для перевода звучащей речи на язык жестов. Над решением этой задачи работали многие ученые. Но только новосибирским инноваторам удалось создать первый в мире работоспособный продукт. Используя приложение, слабослышащие инвалиды смогут общаться с обычными людьми. Резидент IT-инкубатора новосибирского Академпарка ООО «Сурдофон», работающее в составе УК «Ломоносов Капитал», создало устройство для перевода звучащей речи на язык жестов. Разработанная учеными программа сначала распознает звучащую речь, затем анализирует ее смысл и переводит на язык глухонемых. После чего анимационная кукла-аватар жестами показывает прозвучавший текст на экране монитора. Это решает основную проблему, с которой каждый день сталкиваются инвалиды по слуху, — как понять то, что им говорят окружающие. Инновационная разработка откроет инвалидам по слуху доступ на публичные лекции и выступления. Текст, который лектор или политик произносит в микрофон, после программной обработки можно будет синхронно выводить на большой экран. Что особенно важно, дети с ограниченными возможностями смогут не только полноценно воспринимать уроки в коррекционной школе, но даже посещать обычную школу. На следующем этапе создатели программы по сурдопереводу планируют создать desktop-приложение, которое позволит инвалидам по слуху пользоваться интернет-радио. Одним из наиболее социально значимых результатов использования программы может стать установка в госучреждениях специальных коммуникаторов. Государственные служащие, к которым обращается инвалид по слуху, смогут с его помощью донести до него всю нужную информацию. Госслужащие будут произносить нужный текст в коммуникатор, а виртуальный переводчик на большом экране коммуникатора перескажет на языке глухонемых все, что они говорят. Это поможет решить поставленную государством стратегическую задачу – сделать государственные услуги доступными для всех слоев населения. По замыслу разработчиков программы, финальным этапом станет создание мобильного приложения для смартфона. Установив его, человек, лишенный слуха, сможет принять звонок – он будет преобразован в видеоизображение. Вот такие фантастические перспективы открывает изобретение ООО «Сурдофон». И это только в первом приближении – с началом коммерческого использования программы наверняка появится множество новых идей, как и где ее применить. Много времени и усилий ушло у новосибирских ученых и на создание виртуального сурдопереводчика. Первоначально использовалась готовая компьютерная кукла, но как выяснилось, она была недостаточно управляемой. Поэтому авторы создали собственного аватара, который может работать на разной скорости, у него более проработанные жесты, и особенно пальцы. Это очень важно при передаче языка глухонемых. Потом пришлось работать над совершенствованием системы нотаций – системы описания жестов.