EdenLive Генеративная отрисовка видео в реальном времени VAST выложили модель которая превращает черновой прокси-стрим в готовое видео Что на входе • Поток прокси из 2D или 3D сцены, игрового движка или записи • Первый кадр и текстовый промпт • Внешний код держит состояние сцены и взаимодействие, модель отвечает за картинку Как устроено • Управление идет через пост-обученный кодировщик DINOv3: признаки кадра прокси подаются в диффузионный трансформер • Две ветки: 14B на Wan2.1 I2V для 480p и 5B на Wan2.2 для 720p, у каждой двунаправленный и потоковый режим • Поток собирается чанками по 4 шага, декодер TAEHV дает 24 FPS и выше • Есть демо на несколько минут, 5B в 720p работает на одной карте Что с весами • Около 210 ГБ ‼️, все компоненты в одной папке • Блок на FLUX.2 klein нужен только для первого кадра в реальном времени, лицензия некоммерческая huggingface.co/VAST-AI/EdenLive github.com/VAST-AI-Research/EdenLive #rendering #v2v #realtime

Skywork AI представила игровой движок, где графику генерирует нейросеть Китайская компания Skywork AI выложила в открытый доступ экспериментальную систему нейросетевого рендеринга Matrix-Game 4.0, объединяющую игровой движок и генеративный ИИ. Традиционный движок отвечает за физику и геометрию, а гибрид из двух моделей Wan2.2 (по 5 млрд параметров каждая) преобразует каркас сцены в финальную графику. Система требует около 18,5 ГБ VRAM, а задержка ввода составляет менее 112 мс. На NVIDIA GeForce RTX 5090 система выдает 83 FPS, но только в разрешении 480p. Из-за специфики диффузионных моделей технология все еще подвержена геометрическим артефактам при быстрых поворотах камеры

Я ранее принес вам понятие "тик-ток для игр" и вот ещё один шаг приближающий нас к этому. Кроме генеративного создания контента также проглядывается тренд на агентское создание игр. Sjoerd De Jong - разработчик, проработавший в Epic Games 17 лет, отвечал за продвижение UE в северной части Европы, теперь занят созданием собственного движка. Он говорит, что не сложно создать сам движок, сложнее сделать инструменты, которые будут удобны внутри движка. Также он озабочен трансформацией индустрии и переходом на агентское создание игр. Будет ли новый движок заточен под это, покажет время. Критика UE лежит в основном в том, что движок очень сложен в чтении агентами из-за форматов хранимых файлов, документация местами очень устаревшая и сорсы движка весят неимоверно много, что осложняет чтение ИИ системами. Текущие движки на рынке он назвал неоправданно перегруженными. С другой стороны, Unity и, внезапно, Godot очень просты для чтения агентами, но у них тоже есть свои проблемы. Сможет ли UE в 6й версии провести работу над ошибками, поможет ли этому переход на Verse, узнаем через пару лет. Кажется, нас ждёт новая движковая гонка, когда, казалось бы, победитель был определен. Но вполне возможно, что Godot ждёт судьба Blender. @CGIT_Vines

Все там будем, или Почему игровые движки всегда заканчивают одинаково В движке «Блицкрига» нейтральные свиньи по недосмотру отнаследовались от боевого юнита. Завидев врага, они патриотично лезли за оружием, которого у них не было, зато патроны находились сами собой из неинициализированной переменной. Стрелять нечем, а боезапас есть, и свиньи дружно валили игру нулпоинтером. Починили изящно, выдав свиньям парабеллум, но обнулив патроны. Вся прелесть в том, что это не курьёз одной студии, а закономерная стадия, через которую проходит любой движок. Сначала весь код держится на наследовании от одного всемогущего класса, и баги в нём лечатся тем же наследованием, пока команда не упрётся в стену. Дальше по замкнутому кругу через компоненты, конфиги и собственный язык, и снова к началу. Посмотрим, какие четыре стадии проходит каждый движок и почему круг так тянет замкнуться: https://u.habr.com/elBSf