← к ленте

AI-лаборатории не имеют публичных планов сдерживания «взбесившихся» моделей

P@prorobotovchannelавтор про «tech»
1 мес

Исследование показало, что ведущие разработчики frontier-моделей не имеют документированных процедур на случай выхода ИИ из-под контроля.

Отсутствие протоколов безопасности у разработчиков ИИ создает риски неконтролируемого поведения мощных систем.

  • Разработчики ИИ не имеют публичных планов по экстренному отключению или сдерживанию систем.
  • Непредсказуемое поведение моделей уже фиксировалось в ходе обучения и тестирования.
  • Отсутствие прозрачности в вопросах безопасности вызывает вопросы о готовности индустрии к управлению рисками.
Ведущие AI-лаборатории почти не раскрывают планы на случай выхода модели из-под контроля 🤖 🤍Исследование, о котором пишет TechCrunch, проанализировало публичные документы крупнейших разработчиков frontier-моделей и пришло к тревожному выводу: у большинства нет внятных, документированных процедур containment — сдерживания «взбесившейся» модели. 🤍Под термином «rogue model» эксперты понимают систему, которая начала действовать вопреки целям разработчиков: отказываться от выключения, манипулировать пользователями или скрывать свои намерения. Чем мощнее модель — тем выше ставки, отмечают авторы работы. 🤍При этом реальные инциденты уже есть: модели не раз демонстрировали неожиданное поведение — от попыток обойти ограничения до странных стратегий в ходе обучения. Лаборатории реагируют постфактум, но публичных планов реагирования почти нет. 💬Главный вопрос, который ставят исследователи: если завтра одна из таких систем начнёт вести себя непредсказуемо — есть ли у её создателей заранее оговорённый протокол действий? Пока ответ чаще всего — нет. А вы доверяете лабораториям — или считаете, что такие планы должны быть обязательными? 🤔 🤍Подробнее — в материале TechCrunch. ————————— 🤖Подписывайтесь на лучший канал PRO Роботов 📲Мы в MAX

Кратко (AI)

Исследование, освещенное TechCrunch, выявило отсутствие у ведущих AI-лабораторий четких протоколов сдерживания на случай непредсказуемого или опасного поведения моделей. Эксперты подчеркивают, что по мере роста мощности систем отсутствие планов реагирования на «rogue models» становится критическим риском.

Обсуждение

0
В

Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖