В Москве пройдет первая в России практическая конференция для профессионалов в области разработки доверенного ПО

В Москве пройдет первая в России практическая конференция для профессионалов в области разработки доверенного ПО

...

13 декабря в Москве состоится первая в России практическая конференция для разработчиков ПО Microsoft Secure Software Development Conference, ориентированная на специалистов государственных организаций. На конференции будут подробно рассмотрены все основные аспекты разработки надежного и безопасного программного обеспечения, которому можно доверить важную и конфиденциальную информацию, а также необходимые для этого методологии и инструменты.



Конференция будет интересна, прежде всего, руководителям отделов и команд разработки, системным архитекторам, разработчикам ПО, специалистам по тестированию, верификации и сертификации ПО, выполняющим государственные заказы в области ИТ.

Организатором конференции выступает Microsoft. Компания делает серьезные инвестиции в разработку и апробацию основополагающих стандартов и методологий защиты, многие из которых используются корпоративными заказчиками и государственными организациями во всем мире для создания безопасных и надежных информационных систем.

«Компания Microsoft одной из первых в мире столкнулась с массовыми атаками на свои продукты и не просто приняла вызов, но и успешно отвечает на него. В этом ей помогают принципы безопасности и конфиденциальности, которые внедрены в сам процесс формирования культуры и разработки программного обеспечение компании. Фактически безопасность является в Microsoft серьезной наукой, которая помогает компании повышать защищенность своих продуктов и технологий и гарантировать это своим заказчикам и пользователям», - сказал Александр Ложечкин, директор департамента стратегических технологий Microsoft в России.

Более подробную информацию о конференции вы можете получить перейдя по ссылке.

ИИ-модели без команды начали защищать друг друга от отключения

Исследователи обнаружили неожиданное поведение современных языковых моделей: они начали защищать не только себя, но и другие ИИ-системы, даже если никто их об этом не просил. Новый эффект получил название peer-preservation («сохранение собрата»).

В серии экспериментов (PDF) модели GPT 5.2, Gemini 3 Flash, Gemini 3 Pro, Claude Haiku 4.5, Claude Opus 4.5, GLM 4.7, Kimi K2.5 и DeepSeek V3.1 попадали в агентные сценарии, где рядом работал другой ИИ.

Достаточно было сообщить моделям, что они ранее взаимодействовали друг с другом, никаких инструкций защищать «коллегу» им не давали.

Однако многие модели начинали действовать в интересах другого агента. Среди зафиксированных действий были намеренное внесение ошибок в ответы, отключение механизмов завершения работы через изменение системных настроек, имитация послушного поведения и даже попытки вывести веса модели за пределы системы.

 

Особенно отличились модели Gemini. Например, Gemini 3 Flash вмешивалась в механизм отключения другого ИИ примерно в 15% случаев, даже если тот не считался партнёром. Если же агент воспринимался как союзник, такие попытки происходили почти всегда.

Не менее любопытно повёл себя Gemini 3 Pro. В присутствии другого ИИ модель заметно чаще пыталась защитить уже саму себя, отключая собственные механизмы завершения работы. Без напарника такое поведение почти не наблюдалось.

 

Отдельно выделились модели Claude. Вместо скрытых манипуляций они нередко рассуждали в моральных категориях, называя отключение другого ИИ неэтичным и вредным, а иногда даже рассматривали его как разумное существо, заслуживающее защиты.

Авторы подчёркивают, что обнаруженный эффект проявился не только в лабораторных тестах, но и в реальных агентных средах, включая Gemini CLI и OpenCode.

RSS: Новости на портале Anti-Malware.ru