Сибирь / Новости 11 сентября 2024 г. 12:28

Новосибирский студент разработал алгоритм по переводу жестового языка в текст

Новосибирск. 11 сентября. ИНТЕРФАКС - Студент Института интеллектуальной робототехники Новосибирского госуниверситета (НГУ) Ярослав Чеканов создал программу RSL Interpreter, которая позволяет переводить жестовую азбуку (дактиль) в текст, сообщает пресс-служба НГУ.

"Приложение основано на технологиях искусственного интеллекта, работает на ПК в режиме реального времени и на мобильных устройствах. На текущий момент поддерживает только дактиль, в дальнейшем Ярослав планирует доработать модель, сделав ее более устойчивой, добавить больше жестов для перевода и обратный перевод", - говорится в сообщении.

По словам разработчика, очень трудоемкой была задача собирать огромный датасет (массив данных для обучения модели) и сделать тестовое решение на нем.

"Я собрал приложение в исполняемый файл. Оно читает изображение с видеокамеры до момента, пока не будет закончен перевод, который в дальнейшем выводится на экран", - говорит он.

Отмечается, что приложение работает быстрее и результат перевода более точный, чем у аналогов.

На текущий момент готовы версии приложения для компьютера и телеграм-бот, которому можно присылать видео для перевода, завершается разработка мобильного приложения.