Использование vid2vid для генерации видео из 3D-болванок
Н@monkeyinlawAI-инженер
1 месОбзор пайплайна для создания фотореалистичных видео на основе 3D-анимации из Unreal Engine или Blender с помощью Seedance 2.0 и Kling.
Старый-добрый vid2vid
Уже знакомый процесс 3D абстракция в фотореалистичную генерацию переживает новые дыхание.
Делал похожее здесь и здесь, ещё в более старых моделях. При этом каждая новая модель дает новые возможности уже проверенных пайплайнов.
🧑🎓Пайплайн такой:
— Unreal Engine/Blender для болванок (выводим в 24fps)
— Промпт который очень четко описывает процесс + движение камеры
— Реф картинка, либо первого кадра, либо одного из ключевых (можно взять кадр из любимого фильма, чтобы сразу перенести цветокор и муд)
— Подать в Seedance 2.0 / Kling как vid2vid
Вуаля, у нас прекрасное управление камерой и положения персонажей.
Сделал свои примеры, про это в next посте.
Автор второго ролика — LINK
Кратко (AI)
Автор описывает процесс создания видео с помощью нейросетей, используя 3D-болванки из Unreal Engine или Blender в качестве основы. Для генерации фотореалистичного контента с сохранением движения камеры и персонажей применяются модели Seedance 2.0 или Kling в режиме vid2vid.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖