← к ленте

World Labs представила мультимодальную модель Atlas

T@techsparksAI-инженер
1 мес

Фей-Фей Ли и компания World Labs анонсировали Atlas — мультимодальную модель, работающую с текстом, изображениями, видео и 3D-пространством.

Разработка моделей, понимающих 3D-пространство, является ключевым шагом к созданию полноценного физического ИИ.

  • Atlas объединяет текст, видео и 3D в единый контекст, что позволяет ИИ лучше понимать физический мир.
  • Технология может ускорить обучение роботов и систем Physical AI через создание реалистичных симуляций.
  • Это важный конкурентный шаг в области мультимодальных моделей, выходящий за рамки стандартных чат-ботов.
Все массово и бурно обсуждают запуск модели Astra от OpenAI (еще бы, создатели, не скупящиеся на пиар в преддверии IPO, уже назвали ее первой ласточкой наступающего AGI). И на этом фоне незаслуженно тихо прошел анонсированный дня три назад запуск модели мира по имени Atlas от World Labs знаменитой Фей-Фей Ли.
Atlas is an omni model that we pretrained from scratch to natively operate on text, images, video, and 3D. It is a multimodal autoregressive diffusion transformer: all inputs are combined into a shared spatial context. Atlas uses that context to generate what comes next, staying consistent in 3D with everything it has seen and imagining what lies beyond it.
Впрочем, все это лучше один раз увидеть, чем сто раз прочитать: очень советую сходить по ссылке на их пост и все иллюстрации посмотреть (а некоторые даже и потыкать, что важно). То, что у них получилось, не только создателям мультиков окажется полезно, куда интересней создание симуляций для обучения разных представителей мира Physical AI. https://www.worldlabs.ai/blog/atlas

Кратко (AI)

Компания World Labs, основанная Фей-Фей Ли, представила модель Atlas, способную работать с текстом, изображениями, видео и 3D-данными. Модель использует архитектуру диффузионного трансформера для создания пространственно согласованных симуляций, что может быть полезно для развития Physical AI.

Обсуждение

0
В

Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖