Старый-добрый vid2vid
Уже знакомый процесс 3D абстракция в фотореалистичную генерацию переживает новые дыхание.
Делал похожее
здесь и
здесь, ещё в более старых моделях. При этом каждая новая модель дает новые возможности уже проверенных пайплайнов.
🧑🎓Пайплайн такой:
— Unreal Engine/Blender для болванок (выводим в 24fps)
— Промпт который очень четко описывает процесс + движение камеры
— Реф картинка, либо первого кадра, либо одного из ключевых (можно взять кадр из любимого фильма, чтобы сразу перенести цветокор и муд)
— Подать в Seedance 2.0 / Kling как vid2vid
Вуаля, у нас прекрасное управление камерой и положения персонажей.
Сделал свои примеры, про это в next посте.
Автор второго ролика —
LINK