Нейросеть оживила портрет Достоевского
Возможности технологии также продемонстрированы на «Девушке с жемчужной сережкой», фотографиях Мэрилин Монро и Альберта Эйнштейна.
Российские разработчики представили алгоритм, способный создавать анимированное изображение из обычного портрета. Разработка основана на сверточной нейросети, пишет N+1 со ссылкой на статью на arXiv.org.
Для переноса информации достаточно одного или несколько кадров. На каждое изображение лица накладывается маска, обозначающая базовую мимику человека. Эти данные позволяют «оживить» исходный кадр. В работе над алгоритмом приняли участие разработчики из Samsung и «Сколково». С помощью нейросети теперь можно создавать «говорящие головы».
В дальнейшем разработчики планируют заняться устранением заметных дефектов и искусственности движений.