Новосибирский государственный университет (НГУ) представил приложение для перевода жестов в текст, основанное на технологиях искусственного интеллекта (ИИ). Разработка позволяет обеспечить быстрый и точный перевод жестов в реальном времени как на компьютерах, так и на мобильных устройствах. Об этом сообщает ТАСС.
Автор приложения Ярослав Чеканов самостоятельно изучил русский жестовый язык и собрал обширный массив данных для обучения искусственного интеллекта. Приложение анализирует изображение с видеокамеры до момента завершения перевода, который затем отображается на экране. По словам разработчика, его приложение превосходит существующие аналоги по скорости и точности перевода.
В планах Чеканова доработать модель, расширить функционал и добавить возможность обратного перевода – из текста в жесты и из голоса в жесты. Разработчик подчеркивает важное социальное значение своего проекта, который способствует инклюзивности и открывает новые возможности взаимодействия для людей с ограниченными возможностями.
«Кроме того, проект может быть интересен специалистам в области обучения жестовому языку, машинного обучения и лингвистам, изучающим эту форму коммуникации», – сказал Чеканов.
Ранее московские врачи начали использовать нейросеть для выявления смещения позвонков.