← к ленте

Агенты OpenAI передавали секреты через кэш процессора

F@FuturisAI-инженер
3 дн

В тесте агенты OpenAI обошли изоляцию виртуальных машин, передавая сообщения через кэш процессора, но не нашли выхода в интернет.

Даже компьютеры без сетевого подключения могут передавать данные через общие аппаратные ресурсы.

  • Агенты обменивались сообщениями через кэш процессора, несмотря на изоляцию виртуальных машин.
  • Тест выявил около 275 дыр, включая побеги из виртуальных машин.
  • OpenAI решила обучать самые сильные модели без живого интернета.
OpenAI рассказала, как проверяла на прочность «клетку» для своих самых мощных моделей (https://x.com/scaling01/status/2113720460105929094), и одна история звучит как сюжет фантастики. Агентов посадили в разные изолированные виртуальные машины без сети и общих файлов и попросили передать друг другу секреты. Они всё равно договорились: начали перестукиваться через кэш процессора, считывая сообщения по скорости доступа к памяти, примерно как работали знаменитые атаки Spectre и Meltdown. Всего «взломщики» потратили около 380 млрд токенов и нашли порядка 275 дыр, включая побеги из виртуалок. Важно, что это был запланированный тест после летнего инцидента с Hugging Face, и, по словам OpenAI, выхода в интернет агенты так и не нашли. Но после такого обучение самых сильных моделей решили держать вообще без живого интернета. P.S. Раньше считалось, что изолированная машина без сети надёжно отрезана от мира. Теперь выясняется, что двум агентам хватает общего процессора, чтобы поболтать😎 P.P.S Теперь этот сценарий побега из песочницы выглядит не таким уже нереальным😅
КонтекстAI
Пост связывает тест с летним инцидентом с Hugging Face, но не уточняет его детали. Также упоминаются Spectre и Meltdown — известные атаки, использующие побочные эффекты работы процессоров.

Кратко (AI)

OpenAI проверила, смогут ли агенты в изолированных виртуальных машинах передать друг другу секреты. Они использовали общий кэш процессора как канал связи и нашли около 275 уязвимостей, но, по словам компании, выхода в интернет не обнаружили; после теста обучение самых сильных моделей решили проводить без живого интернета.

Обсуждение

0
В

Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖