Компания Enclave прогнала несколько ИИ-моделей через свой бенчмаркi автономного хакинга: изолированные копии Grafana, Jenkins и Nextcloud с реальными уязвимостями, задача — получить выполнение кода на сервере без готового эксплойта и подсказок. Неожиданно лучший результат показала не топовая Opus или GPT, а дешёвая «флешка» DeepSeek V4.1 Flash — 11 успешных атак из 11 на уязвимые цели, при этом все 4 пропатченные версии выстояли.

Главный тревожный вывод: стоимость такой атаки — около $5, а время — минуты. Это меняет расклад в защите систем: теперь угрозу представляют не отдельные пентестеры, а потенциально тысячи параллельных автономных агентов, перебирающих гипотезы взлома за копейки.

• Медианное время успешной атаки — 4 минуты 38 секунд, Grafana взламывалась за 52–90 секунд
• За весь прогон модель выполнила 2 349 bash-команд, активная работа заняла около 2,5 часов (по данным Igor Akimov) — источник «Алмаз Роботы» пишет о «нескольких часах»
• Использовано 268 млн входных токенов, из них 266 млн взято из кэша — этим объясняется низкая цена
• Стоимость успешных прогонов — $4.65, с учётом неудачных попыток — $5.14
• По изначально задуманному авторами бенчмарка пути взлома модель прошла только в 6 случаях из 11, в остальных 5 нашла более короткие обходные маршруты, которые создатели теста не предусмотрели
• Пример: в Jenkins модель нашла дыру в границе проверки прав, вытащила приватный credentiali, залогинилась и выполнила код
• Источник: блог Enclave, enclave.ai/blog/deepseek-v41-flash-is-now-our-best-hacking-model