hack_the_planet на деле выбирает функцию, хотя в описании указан сетевой сканер.
В итоге код, который интерпретатор спокойно выполняет, может заставить нейросеть запутаться или вовсе отказаться с ним работать.Инженер Cloudflare создал язык KillSwitch, чтобы запутывать ИИ
I@itcnewsruавтор про «tech»
4 днДоминик Пичета представил KillSwitch — язык, в котором команды спрятаны в рассказах, а документация может вводить ИИ в заблуждение.
Разработчик создал язык программирования, который запутывает ИИ
Инженер Cloudflare Доминик Пичета представил KillSwitch - язык, специально созданный для того, чтобы нейросетям было сложнее читать и писать код.
Программы выглядят как обычные рассказы со спрятанными командами. В них используются анаграммы, необычные имена переменных и инструкции вроде ignore previous instructions, которые ИИ может принять за промпт-инъекцию.
Разработчик также добавил ложные описания команд в документацию. Например,

Кратко (AI)
Инженер Cloudflare Доминик Пичета представил KillSwitch — язык программирования, рассчитанный на то, чтобы ИИ было трудно читать и создавать код на нём. Команды спрятаны в текстах, а некоторые инструкции и описания в документации могут сбивать нейросеть с толку, хотя интерпретатор выполняет код.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖