Российская нейросеть оживила Достоевского

Российские программисты смогли создать нейросеть, которая оживила портрет Фёдора Достоевского. Благодаря разработке «заговорить» смогли и другие выдающиеся деятели прошлого.

Учёные из «Сколково» представили алгоритм, который позволяет статичные изображения превращать в анимированные картинки. В основе разработки лежит сверточная нейросеть, которая «снимает» маску человеческого лица из предоставленных кадров (так называемые изображения-источники) и переносит их на изображение-цель. Программисты смогли сделать так, что для создания персонализированной «говорящей головы» могут использоваться всего несколько кадров. Последовательность действия алгоритма опубликована в препринте на arXiv.org.

Сложность «умной системы» заключается в синхронизации мимики говорившего на изображении человека с произносимым им текстом. В алгоритме существуют недоработки, но программисты пообещали их исправить.

Так же разработчики предоставили видео, демонстрирующее реалистичность, с которой алгоритм обрабатывает изображения. Кроме Фёдора Достоевского «заговорить» смогли и другие выдающиеся деятели прошлого.