
Как хмурилась бы Мона Лиза? Как говорил бы Достоевский? Как улыбалась бы незнакомка с портрета Крамского? Раньше о таком можно было только фантазировать, но теперь на все эти вопросы появился вполне себе визуально ощутимый ответ. Разработчики из Samsung и Сколково представили алгоритм, который превращает фотографию или даже портрет в видео с вполне естественной мимикой. Персонажи картин и известные личности движутся, разговаривают и вообще выглядят как давно знакомые ребята.
Новый алгоритм от Samsung и Сколково позволяет оживлять портреты и даже картины
Вот, например, Сальвадор Дали его работы
Героиня картины «Неизвестная» Ивана Крамского
Альберт Эйнтштейн
Мона Лиза
И Фёдор Михайлович Достоевский собственной персоной
Как же этот чудо алгоритм работает?
Алгоритм работает на основе свёрточной нейросети, которая превращает портреты и снимки в движущиеся изображения, сообщает издание N+1.
Для того, чтобы система адекватно анимировала людей, её обучили на большом количестве кадров с лицами
На физиономию исходников накладывается специальная маска, которая определяет границы лица и то, как оно движется. Затем эта маска накладывается на изображение, которое нужно «оживить» — вуаля! По словам разработчиков, большого количества ракурсов оживляемой картинки не нужно — иногда достаточно и одного.
Естественно, чем больше кадров оживляемого изображения — тем лучше
И возможности такой программы кажутся очень заманчивыми!
Так это что, у нас наконец-то появятся портреты как в Хогвартсе?