Реалтайм-генерация видео в Blender через H3 Max
М@cgeventAI-инженер
1 месОбзор интеграции H3 Max в Blender для генерации видео в реальном времени с использованием мощностей серверов с 8хB200.
Технологии генерации видео становятся интерактивными и работают в реальном времени.
- Появление инструментов для генерации видео быстрее скорости воспроизведения.
- Возможность создания интерактивного контента, где сюжет меняется в зависимости от действий пользователя.
- Высокие требования к железу (серверы с B200) пока ограничивают использование технологии локальными рабочими станциями.
Кнопка продолжай красиво.
Простите за Астроистерику, но похоже выход Астры подтолкнул сообщество к экспериментам, о которых мы раньше и не думали. Особенно радует, что Минимах-истерика тоже продолжается и на базе Минимаксянского появляется просто тонна новых решений и на него уже ставят производители типа Нвидия (им сам бог велел).
Что на видео?
Астровская не спеша моделит кораблик, и прямо в окне Блендора идет постоянный подрендер (нет, не картинки) и сразу видео(анимации) в разных стилях. Ну то есть реалтайм рендер видосов.
Кожаным остается только смотреть и, быть может, покрикивать на Астру.
Рендер идет на стороне FAL через выкликивание H3 Max в реальном времени.
За Минимах появилось уже тонна решений по "генерации быстрее плейбека".
Одни из самых известных это FAL H3 Max, VDN и SOL от Нвидия. Все они генерят видосы быстрее реалтайма.
За кадром вопрос: на чем?
Ответ: на сервере с 8хB200. Ну то есть это ПОКА решение не для локального просчета.
И в сети уже масса проектов по "video on demand" - когда юзер решает, куда пойдет бесконечная генерация. Сервер успевает сгенерить по три-четыре варианта в буфер и просто подставляет нужный кусок в зависимости от реакции чата или пользователя. Тот самый управляемый Нетфликс, который поворачивает сюжет под ваши влажные фантазии.
Пока дорого в абсолютных цифрах (апи вызовы стоят денег), но в относительных цифрах на производство стриминг-контента - ничего.
Очень интересный момент наступает - не только сделай красиво, а продолжай делать красиво, пока я жму лапкой на кнопку.
Дошутились.
https://github.com/gokayfem/H3-Max-Blender
@cgevent
Кратко (AI)
Автор описывает возможности реалтайм-генерации видео в Blender с помощью моделей типа H3 Max, VDN и SOL. Процесс требует значительных вычислительных мощностей, таких как серверы с 8хB200, и позволяет создавать интерактивный контент, управляемый пользователем в реальном времени.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖