Нейросети

Как оживить фотографии с помощью нейросети?

Ольга, Уфа 1,1 тыс. просм.

Нашла старые семейные фотографии бабушки и дедушки и видела в интернете ролики, где похожие снимки оживляют нейросетью: человек на фото моргает, поворачивает голову, улыбается. Хочу сделать так же для семейного архива. Какие сервисы для этого использовать и что нужно от самого фото?

Дмитрий Волков инженер по машинному обучению

ответил

эксперт

Такие ролики делают сервисы вроде D-ID, Runway или Kling, которые анализируют статичное изображение лица и достраивают правдоподобное движение: моргание, повороты головы, мимику. Технически внутри почти всегда лежит диффузионная модель, обученная на большом количестве видео с человеческими лицами, она предсказывает, как выглядело бы движение, исходя из одного кадра.

Качество результата сильно зависит от исходного фото. Лучше всего оживляются снимки, где лицо расположено анфас или почти анфас, хорошо освещено и не перекрыто волосами, очками с бликами или головным убором. Старые фотографии часто имеют низкое разрешение и царапины, поэтому первый шаг обычно не оживление, а реставрация: увеличение резкости и устранение царапин через отдельный инструмент (тот же Remini или встроенные функции некоторых редакторов), и только потом загрузка в сервис анимации.

Порядок действий для семейного архива такой:

  • отсканируйте фото в максимальном доступном разрешении, а не фотографируйте с экрана;
  • при необходимости прогоните через реставрацию, чтобы убрать шум и повысить чёткость;
  • загрузите результат в выбранный сервис оживления и выберите готовый пресет движения (моргание, лёгкая улыбка, поворот головы) или запишите короткое голосовое сообщение, если нужна синхронизация губ с речью.

Из ограничений: чем сильнее лицо на фото повёрнуто в сторону, тем чаще модель искажает черты при повороте головы, поэтому для сложных ракурсов результат стоит проверять внимательно, а не публиковать первую же попытку. И ещё один момент, о котором стоит помнить: подобная анимация чужого лица, даже покойного родственника, для родного семейного архива вопросов не вызывает, а вот публичное использование чужих фотографий без согласия живых людей на снимке лучше не практиковать.

Задать свой вопрос

Вопросы проходят модерацию. Ответ эксперта публикуется на сайте в течение пары дней.

Похожие вопросы

Все в теме