← к ленте

Реалтайм-генерация видео в Blender через H3 Max

М@cgeventAI-инженер
1 мес

Обзор интеграции H3 Max в Blender для генерации видео в реальном времени с использованием мощностей серверов с 8хB200.

Технологии генерации видео становятся интерактивными и работают в реальном времени.

  • Появление инструментов для генерации видео быстрее скорости воспроизведения.
  • Возможность создания интерактивного контента, где сюжет меняется в зависимости от действий пользователя.
  • Высокие требования к железу (серверы с B200) пока ограничивают использование технологии локальными рабочими станциями.
Кнопка продолжай красиво. Простите за Астроистерику, но похоже выход Астры подтолкнул сообщество к экспериментам, о которых мы раньше и не думали. Особенно радует, что Минимах-истерика тоже продолжается и на базе Минимаксянского появляется просто тонна новых решений и на него уже ставят производители типа Нвидия (им сам бог велел). Что на видео? Астровская не спеша моделит кораблик, и прямо в окне Блендора идет постоянный подрендер (нет, не картинки) и сразу видео(анимации) в разных стилях. Ну то есть реалтайм рендер видосов. Кожаным остается только смотреть и, быть может, покрикивать на Астру. Рендер идет на стороне FAL через выкликивание H3 Max в реальном времени. За Минимах появилось уже тонна решений по "генерации быстрее плейбека". Одни из самых известных это FAL H3 Max, VDN и SOL от Нвидия. Все они генерят видосы быстрее реалтайма. За кадром вопрос: на чем? Ответ: на сервере с 8хB200. Ну то есть это ПОКА решение не для локального просчета. И в сети уже масса проектов по "video on demand" - когда юзер решает, куда пойдет бесконечная генерация. Сервер успевает сгенерить по три-четыре варианта в буфер и просто подставляет нужный кусок в зависимости от реакции чата или пользователя. Тот самый управляемый Нетфликс, который поворачивает сюжет под ваши влажные фантазии. Пока дорого в абсолютных цифрах (апи вызовы стоят денег), но в относительных цифрах на производство стриминг-контента - ничего. Очень интересный момент наступает - не только сделай красиво, а продолжай делать красиво, пока я жму лапкой на кнопку. Дошутились. https://github.com/gokayfem/H3-Max-Blender @cgevent

Кратко (AI)

Автор описывает возможности реалтайм-генерации видео в Blender с помощью моделей типа H3 Max, VDN и SOL. Процесс требует значительных вычислительных мощностей, таких как серверы с 8хB200, и позволяет создавать интерактивный контент, управляемый пользователем в реальном времени.

Обсуждение

0
В

Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖