Основная функция программы заключается в том, чтобы воспринимать сигналы мозга человека, такие как изображение и жесты, и конвертировать их в соответствующий перевод.
Также благодаря этой программе на компьютере можно управлять звуком, яркостью изображения и курсором.
Учёный Алексей Приходько изобрёл два вида управления компьютером: безмаркерный и маркерный. Маркерный - подразумевает в себе использование специального оборудования, такого как перчатки и браслеты, которые распознают движения тела и жестикуляцию. А безмаркерный тип распознавания работает в виде фиксирования изображения через камеру компьютера.
Новая программа позволит не только упрощать общение между людьми, но и поможет в обучении переводчиков с языка глухих.