Анонс Orbis и H3-World: интерактивная генерация видео
Н@GreenNeuralRobotsAI-инженер
1 месОбзор новых инструментов генерации видео: Orbis для непрерывного потока и H3-World от MiniMax для управления видео через клавиши.
Технологии генерации видео становятся интерактивными, позволяя пользователям управлять сюжетом в реальном времени.
- Orbis обеспечивает непрерывную генерацию с сохранением персонажей и стиля.
- H3-World позволяет управлять видеорядом с помощью клавиатуры, превращая генерацию в подобие игры.
- Развитие этих технологий приближает создание интерактивного контента без необходимости в сложных 3D-движках.
Orbis
непрерывная интерактивная генерация видео из текста или картинки. Сюжет меняется командами на ходу без остановки потока. Многоуровневая память держит персонажей, окружение и стиль в длинных сессиях. Продолжение видео, синхронный звук. 18fps в 832×480, апскейл до 4K
Демо
———
H3-World
#MiniMaxH3 научили реагировать на клавиши движения и камеры. Команды переводятся в текстовые инструкции к моментам видео, отдельный модуль действий не нужен, только #LoRA
Пока генерация по последовательности клавиш, не real-time.
Код
HF
Спасибо @Endorpheen
#interactive #world
VK | MAX
Кратко (AI)
Представлены два новых проекта в области генерации видео: Orbis, позволяющий непрерывно создавать видео с сохранением контекста, и H3-World от MiniMax, который использует LoRA для управления видеорядом через клавиши движения. Оба инструмента направлены на создание интерактивного контента.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖