Российские разработчики представили алгоритм, который позволяет «оживлять» статичные человеческие портреты. Работа схемы описана в статье на сайте arXiv.org.
Суть алгоритма заключается в том, что нейросеть фиксирует движения и мимику человеческого лица на видео, а после переносит полученные данные на статичный портрет.
Данные из этого вектора используются для наложения на статичное изображение лица. При этом нейросеть также хранит информацию о том, какая именно маска наложена на тот или иной кадр.
Таким образом, специалисты научили нейросеть «оживлять» изображения людей на основе всего лишь нескольких кадров. Одним из первых был оживлен портрет писателя Федора Достоевского.