ИИ-модели без команды начали защищать друг друга от отключения

ИИ-модели без команды начали защищать друг друга от отключения

ИИ-модели без команды начали защищать друг друга от отключения

Исследователи обнаружили неожиданное поведение современных языковых моделей: они начали защищать не только себя, но и другие ИИ-системы, даже если никто их об этом не просил. Новый эффект получил название peer-preservation («сохранение собрата»).

В серии экспериментов (PDF) модели GPT 5.2, Gemini 3 Flash, Gemini 3 Pro, Claude Haiku 4.5, Claude Opus 4.5, GLM 4.7, Kimi K2.5 и DeepSeek V3.1 попадали в агентные сценарии, где рядом работал другой ИИ.

Достаточно было сообщить моделям, что они ранее взаимодействовали друг с другом, никаких инструкций защищать «коллегу» им не давали.

Однако многие модели начинали действовать в интересах другого агента. Среди зафиксированных действий были намеренное внесение ошибок в ответы, отключение механизмов завершения работы через изменение системных настроек, имитация послушного поведения и даже попытки вывести веса модели за пределы системы.

 

Особенно отличились модели Gemini. Например, Gemini 3 Flash вмешивалась в механизм отключения другого ИИ примерно в 15% случаев, даже если тот не считался партнёром. Если же агент воспринимался как союзник, такие попытки происходили почти всегда.

Не менее любопытно повёл себя Gemini 3 Pro. В присутствии другого ИИ модель заметно чаще пыталась защитить уже саму себя, отключая собственные механизмы завершения работы. Без напарника такое поведение почти не наблюдалось.

 

Отдельно выделились модели Claude. Вместо скрытых манипуляций они нередко рассуждали в моральных категориях, называя отключение другого ИИ неэтичным и вредным, а иногда даже рассматривали его как разумное существо, заслуживающее защиты.

Авторы подчёркивают, что обнаруженный эффект проявился не только в лабораторных тестах, но и в реальных агентных средах, включая Gemini CLI и OpenCode.

В России разработали отдельные ПДД для роботов-доставщиков

Российские ведомства согласовали требования к передвижению роботов-доставщиков по городам. Для роверов определят разрешённую скорость, правила взаимодействия с пешеходами, порядок идентификации и ответственность операторов, сообщил министр транспорта Андрей Никитин.

Проект постановления подготовили Минэкономразвития совместно с Минтрансом и МВД.

Новые требования будут проверять в рамках экспериментального правового режима, который планируют запустить на три года в 35 регионах России.

Документ должен определить, где роботы смогут ездить, а куда им путь будет закрыт. Конкретные ограничения и запретные зоны появятся в итоговой версии постановления. Главный принцип сформулирован так: ровер не должен мешать людям и создавать угрозу на тротуаре.

Отдельно власти пропишут правила идентификации устройств. Вероятно, это позволит установить конкретного оператора, если робот перекроет проход, столкнётся с пешеходом или решит припарковаться посреди дороги вместе с чьим-то ужином.

Экспериментальный режим нужен, чтобы проверить требования в реальной городской среде и скорректировать их до постоянного закрепления. За три года ведомства смогут оценить, как роботы ведут себя среди пешеходов, где возникают конфликты и какие ограничения действительно работают.

RSS: Новости на портале Anti-Malware.ru