Как бы хмурилась Мона Лиза? Нейросети научили оживлять картины и фото и превращать их в анимации

https://twizz.ru/wp-content/uploads/2019/05/cukernoglshdshhzhl.jpg

Как хмурилась бы Мона Лиза? Как говорил бы Достоевский? Как улыбалась бы незнакомка с портрета Крамского? Раньше о таком можно было только фантазировать, но теперь на все эти вопросы появился вполне себе визуально ощутимый ответ. Разработчики из Samsung и Сколково представили алгоритм, который превращает фотографию или даже портрет в видео с вполне естественной мимикой. Персонажи картин и известные личности движутся, разговаривают и вообще выглядят как давно знакомые ребята.

Новый алгоритм от Samsung и Сколково позволяет оживлять портреты и даже картины

Вот, например, Сальвадор Дали его работы

Героиня картины «Неизвестная» Ивана Крамского

Альберт Эйнтштейн

Мона Лиза

И Фёдор Михайлович Достоевский собственной персоной

Как же этот чудо алгоритм работает?

Алгоритм работает на основе свёрточной нейросети, которая превращает портреты и снимки в движущиеся изображения, сообщает издание N+1.

Для того, чтобы система адекватно анимировала людей, её обучили на большом количестве кадров с лицами

На физиономию исходников накладывается специальная маска, которая определяет границы лица и то, как оно движется. Затем эта маска накладывается на изображение, которое нужно «оживить» — вуаля! По словам разработчиков, большого количества ракурсов оживляемой картинки не нужно — иногда достаточно и одного.

Естественно, чем больше кадров оживляемого изображения — тем лучше

И возможности такой программы кажутся очень заманчивыми!

Так это что, у нас наконец-то появятся портреты как в Хогвартсе?

Ну а все объяснения с комментариями можно увидеть на этом видео