← к ленте

ByteDance разрабатывает интерактивные world models

М@cgeventAI-инженер
2 нед

ByteDance активно развивает world models для игр и VR, включая проекты ENUMA и ActWorld, а также интеграцию с гарнитурами Pico.

Развитие world models от ByteDance может радикально изменить создание контента для игр и VR.

  • Технология позволяет генерировать интерактивные 3D-миры из текста в реальном времени.
  • Возможность манипуляции объектами и навигации открывает новые горизонты для VR-гарнитур Pico.
  • Интеграция в игры и видео может значительно снизить порог входа для создания сложного интерактивного контента.
ByteDance готовится бахнуть world models.  И пара утечек. Перед тем как выйдет Cиданский 3.0, скорее всего будет промежуточная модель 2.х. И она будет в этом году. Может даже в ноябре. А вчера Байтденский показал свою новую модель мира.  Система получает текстовое описание и создаёт окружение, по которому можно перемещаться, управляя камерой и персонажем. В демо было: Из текстового промпта создаётся комната глазами человека. Персонаж летает по комнате на бумажном самолётике. Можно свободно менять ракурс и взаимодействовать с окружением. Команда "Добавь ложку рядом с чашкой" создаёт новый объект, по которому затем можно карабкаться. Порталы соединяют совершенно разные пространства. Показана предварительная постановка кинокадров, в том числе на примере "Короля комедии" Стивена Чоу. Я покопалсо за пределами презентации. В сентябре ByteDance уже засветила исследовательскую модель ENUMA в бенчмарке WBench. Она заняла третье место по навигационным задачам с результатом 81.7 балла.  Ускоренная авторегрессионная версия там использует всего четыре шага генерации. В описании ENUMA байтдэнские прямо говорят об объединении управления камерой, текстовых команд и визуальных референсов в одной world model.  Есть и другая разработка ByteDance - ActWorld, модель с памятью о действиях и объектах, ориентированная не только на перемещение по миру, но и на манипуляции с предметами. Ещё в сентябре Bloomberg сообщало, что основатель ByteDance Чжан Имин лично курирует разработку интерактивной world model на базе технологий Seedance. Среди предполагаемых применений - игры, интерактивное видео и VR-гарнитуры Pico(!). Ну и конечно VR-порно. Куда без него и Сиданского. Официальное выступление Beijing TV 7 минут: https://weibo.com/2/detail/5352937104609511 ENU​MA - страница исследователя ByteDance: https://song630.github.io/yizhisong.github.io/ ActWorld - исследовательский проект: https://interactwm.github.io/ActWorld/ Bloomberg: https://www.bloomberg.com/news/articles/2026-09-07/bytedance-founder-joins-ai-elite-in-race-to-perfect-world-models @cgevent

Кратко (AI)

ByteDance активно работает над созданием интерактивных world models, которые позволяют генерировать 3D-окружение по текстовым описаниям с возможностью навигации и взаимодействия. Компания развивает исследовательские проекты ENUMA и ActWorld, а также планирует интеграцию технологий в свои VR-гарнитуры Pico. Разработку лично курирует основатель ByteDance Чжан Имин.

Обсуждение

0
В

Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖