Google представила Genie 4 — модель для генерации интерактивных миров

🔥️️️️️️Новая мировая модель от Google. Симуляция симуляций. А для любителей теории симуляции — симуляция симуляции симуляций Относитесь к некоторым идеям в тексте, как к публицистике и послеобеденным фантазиям, а не утверждениям 100% реальности происходящего. В целом на этом можно было и закончить. Но давайте разберемся чуть. Первое — что такое мировые модели? Если сильно упростить — это модель, которая позволяет создавать (генерировать) любой мир, который будет оперативно реагировать на изменения в нём в зависимости от того с какими условиями он создан. Здесь важно не путать с генерацией картинок или 3д сцен. Здесь чуть другое. Конкретно мировая модель от гугла она не генерит весь мир целиком, а только нужный его кусок. И уже этот "кусок" продолжает генерироваться дальше в зависимости от происходящего в нём. Например, мы сделали генерацию мира где гравитация на земле немного отличается (условия мира) и хотим посмотреть, как в подобных условиях будут расти деревья (уже непосредственно генерация внутри этого мира). Или хотим чтобы наш робот (который допустим управляется LLM и обучается делать кофе) не расхреначивал все шкафчики на кухне 100500 раз в попытках научиться делать американо. Мы этого робота пихаем в сгенерированную реальность и оставляем там. Он без ущерба для нашей реальности там учится. При каждом откртии шкафчика мировая модель "дорисовывает кусок реальности" для робота. Потом возвращаем робота уже на нашу кухню и он без ошибок и вреда — варит вам эспрессо (ведь галлюцинации никто не отменял же?). И такие тренировки — это не моя фантазия. Это уже есть и даже на 3ьем поколении этой модели тренили агентов. Сейчас это уже 4ое поколение фундаментальной мировой модели от Google. Мы можем увидеть, что упор был сделан на реализм и качество. В мирах генерятся также музыка, звуки, шум, разговоры и прочее. Я писал про третье поколение вот тут — можете сравнить разницу в качестве буквально за 1.5 года. Мы привыкли считать опыт чем-то, что обязательно приобретается годами. Нужно побывать в разных ситуациях, ошибиться, разобраться, попробовать ещё раз — и для ИИ это не исключение. А теперь у машины есть возможность проходить такие тренировки в окружении, которое ей создаёт другая машина. Но почему всё должно быть от машин и для машин? Тренировки автопилотов, окружений, действий при чрезвычайных ситуациях — это всё хорошо. Но почему не VR для людей с выдуманным миром? А ответа на "почему нет" — нет... Пока что это невозможно в силу технических ограничений — модель может "помнить", грубо говоря, где лежат предметы и условия мира не очень продолжительное время, а далее начинаются всякие галлюцинации. Возможно что-то типа "старый клён, старый клён, старый клён стучит ..." куда? — правильно "в стекло", или типа "нет зонтика у Шапокляк", " и прочих Мандел.. Но давайте поставим многоточие и оставим эту тему любителям создавать хайп рилзы. Если говорить о фактах на сегодня — модель пока не держит консистентность мира. Но уже того, что есть сейчас, вполне достаточно для других менее футуристических задач. Возможно, какой-нибудь Т-800 в данные минуты сидит и тренируется в Genie 4. А если серьезно, то направление мне кажется одним из самых важных во всей этой истории с ИИ. Мы начинаем создавать машины, которым можно организовать практику, вместо того чтобы бесконечно объяснять всё словами. И когда при покупке домашнего робота вполне захочется узнать, сколько разных квартир он уже успел разгромить на обучении. Может быть когда-нибудь дойдёт и до подобных тренажёров для людей. более подробная информация — здесь Вариантов использования у подобных моделей гораздо больше, чем просто тренить роботов. Какие вы можете нафантазировать?