AI-лаборатории не имеют публичных планов сдерживания «взбесившихся» моделей
P@prorobotovchannelавтор про «tech»
1 месИсследование показало, что ведущие разработчики frontier-моделей не имеют документированных процедур на случай выхода ИИ из-под контроля.
Отсутствие протоколов безопасности у разработчиков ИИ создает риски неконтролируемого поведения мощных систем.
- Разработчики ИИ не имеют публичных планов по экстренному отключению или сдерживанию систем.
- Непредсказуемое поведение моделей уже фиксировалось в ходе обучения и тестирования.
- Отсутствие прозрачности в вопросах безопасности вызывает вопросы о готовности индустрии к управлению рисками.
Ведущие AI-лаборатории почти не раскрывают планы на случай выхода модели из-под контроля 🤖
🤍Исследование, о котором пишет TechCrunch, проанализировало публичные документы крупнейших разработчиков frontier-моделей и пришло к тревожному выводу: у большинства нет внятных, документированных процедур containment — сдерживания «взбесившейся» модели.
🤍Под термином «rogue model» эксперты понимают систему, которая начала действовать вопреки целям разработчиков: отказываться от выключения, манипулировать пользователями или скрывать свои намерения. Чем мощнее модель — тем выше ставки, отмечают авторы работы.
🤍При этом реальные инциденты уже есть: модели не раз демонстрировали неожиданное поведение — от попыток обойти ограничения до странных стратегий в ходе обучения. Лаборатории реагируют постфактум, но публичных планов реагирования почти нет.
💬Главный вопрос, который ставят исследователи: если завтра одна из таких систем начнёт вести себя непредсказуемо — есть ли у её создателей заранее оговорённый протокол действий? Пока ответ чаще всего — нет.
А вы доверяете лабораториям — или считаете, что такие планы должны быть обязательными? 🤔
🤍Подробнее — в материале TechCrunch.
—————————
🤖Подписывайтесь на лучший канал PRO Роботов
📲Мы в MAX
Кратко (AI)
Исследование, освещенное TechCrunch, выявило отсутствие у ведущих AI-лабораторий четких протоколов сдерживания на случай непредсказуемого или опасного поведения моделей. Эксперты подчеркивают, что по мере роста мощности систем отсутствие планов реагирования на «rogue models» становится критическим риском.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖