Сайт MyHeritage представил ограниченно-бесплатный сервис Deep Nostalgia для анимирования фотографий. Технология работает на основе нейросетей глубокого обучения. Нейросеть добавляет фотографиям мимику: моргание, улыбку, движение глаз и легкий поворот головы. Я опробовал этот сервис на своих снимках и вот что у меня получилось (фото кликабельны):
Я отобрал самые удачные анимации. Примерно в 50% опробованных снимков мимика выглядит неестественно. Нейросеть плохо обрабатывает:
— фото в не в фас;
— если на лице ниспадающие волосы;
— если модель наклонила голову (исподлобья или в пол-оборота);
— если на лице есть перепады света и тени.
Нейросеть не даёт выбрать область анимации или разрешение, всё происходит автоматически.
В любом случае, вычислительная фотография — наше будущее. Через несколько лет подобные игрушки будут стоять в каждом смартфоне.