Анимировать старую фотографию с помощью текста, как это делается с генерацией изображений, пока напрямую невозможно. Нейросети, которые сейчас специализируются на анимации старых фотографий, работают немного иначе: они анализируют само фото и добавляют движение на основе обнаруженных лиц, элементов и общего контекста.
Однако, есть сервисы, где вы можете загрузить фотографию и описать, какое именно движение вы хотите добавить, или выбрать стиль анимации, задав его текстом, или вообще применить текстовые «маски» для объектов на фото.
Вот сервисы, которые помогут вам анимировать старые фотографии, и как в них можно использовать текстовые подсказки:
MyHeritage (Deep Nostalgia™):
Описание: Один из самых популярных сервисов для оживления старых фотографий, особенно портретов. Он использует технологию, которая создает короткие, реалистичные видео, где человек на фото начинает двигать головой, моргать и улыбаться.
Как работает: Вы загружаете фотографию, и сервис автоматически создает анимацию. Прямого текстового запроса для типа анимации нет, но качество результата делает его очень впечатляющим.
Где попробовать: myheritage.com/deep-nostalgia (требуется регистрация)
DeepMotion:
Описание: Этот сервис в первую очередь ориентирован на создание 3D-анимации персонажей из видео, но они также экспериментируют с преобразованием 2D-изображений в анимацию. Возможно, в будущем появится более прямой текстовый контроль.
Как работает: Пока что больше ориентирован на работу с существующими моделями или видео.
Где попробовать: deepmotion.com/
LeiaPix Converter:
Описание: Этот сервис создает 3D-эффект (глубину) на фотографиях, что может создать иллюзию движения или объема. Он не делает полноценную анимацию, но оживляет изображение.
Как работает: Вы загружаете фото, и он автоматически создает карту глубины. Затем можно управлять «интенсивностью» 3D-эффекта.
Где попробовать: leiapix.com/
Сервисы на базе Stable Diffusion (например, с использованием ControlNet):
Описание: Более технический подход. С помощью продвинутых настроек Stable Diffusion (например, с использованием ControlNet) можно попытаться управлять скелетом (OpenPose) или движением частей тела на основе референсного изображения или даже некоторого описания. Это требует экспериментов и понимания работы модели.
Как использовать: Вы загружаете своё фото, затем используете модель ControlNet (например, ControlNet OpenPose) с настройками, которые пытаются имитировать движение, или даже пытаетесь «направить» генерацию с помощью текстовых подсказок, чтобы анимировать определенные части.
Где попробовать: Различные веб-интерфейсы Stable Diffusion, где доступен ControlNet (например, Playground AI, или локальные установки, если вы техническиПодкованы).
Что ожидать от «текстового запроса» в этом контексте:
Выбор стиля анимации: «Оживи улыбку», «Пусть глаза моргнут», «Создай эффект ветра».
Направление движения: «Пусть голова повернется влево», «Добавь легкое движение плечами».
Эффекты: «Добавь свечение», «Имитируй дождь, падающий на фотографию».
Самое близкое к «анимации по тексту» сейчас:
Скорее всего, вы можете загрузить фото в один из «умных» редакторов (как MyHeritage) и он сам его оживит. Если вы хотите более тонкого контроля, придется использовать более продвинутые инструменты вроде Stable Diffusion с ControlNet, где можно будет подбирать параметры, которые косвенно управляются вашими текстовыми запросами.
Пока нет универсального бота, куда можно просто написать «анимируй эту старую фотку, чтобы дедушка танцевал», но технологии развиваются очень быстро!
Читать дальше →