Научные сотрудники из Сколтеха создали алгоритм, который изменяет направление взгляда человека на его видеоизображении в режиме реального времени. Об этом сообщает ТАСС со ссылкой на научно-популярный портал пресс-службу Сколтеха.
Инженеры рассказали, что во время разговоров по видеосвязи, к примеру, используя Skype, наш собеседник обычно смотрит на экран, а не в камеру. Из- за этого его взгляд направлен вниз или в сторону. С такой же проблемой сталкиваются и телевизионные дикторы, которые должны одновременно читать текст и смотреть на зрителей.
Но разработчики создали систему, основанную на обучении компьютерной нейронной сети. Сначала в кадре при помощи специального алгоритма локализуется область глаза и вычисляется набор характерных точек. Эти данные вместе с углом, на который нужно скорректировать направление взгляда, поступают в нейросеть, которая рассчитывает, как нужно деформировать изображение глаза, чтобы казалось, будто он смотрит прямо.
То есть, система перенаправляет взгляд на произвольный угол. Ученые планируют улучшить систему, ускорив метод, чтобы он мог работать на любом старом ноутбуке без потери качества. Разработчики считают, что их проект будет пользоваться спросом для видеосвязи, а также в фото- и киноиндустрии для постобработки.
