Агентный ИИ несет целый комплекс угроз для корпораций

Агентный ИИ несет целый комплекс угроз для корпораций

Агентный ИИ несет целый комплекс угроз для корпораций

Агентный искусственный интеллект (ИИ), который работает автономно без участия человека и заранее прописанных алгоритмов, имеет целый ряд уязвимостей. Эти слабые места могут быть использованы злоумышленниками для атак на пользователей подобных систем, в первую очередь корпоративных.

Перечень таких рисков приведён в докладе «Агентный ИИ: маркетинговый ход или технологическая революция?», подготовленном Росконгрессом. Документ оказался в распоряжении РИА Новости.

Согласно докладу, атаки с применением агентного ИИ представляют собой крайне серьёзную угрозу. Потенциальный ущерб от их реализации может превысить последствия традиционных техник кибератак. В числе рисков — нежелательные действия, к совершению которых злоумышленники способны запрограммировать ИИ-агентов.

Отдельное внимание уделено угрозе «отравления памяти» ИИ. Такой сценарий стал возможен благодаря наличию у систем долговременной памяти. Исследования показывают, что использование техники MINJA (Memory INJection Attack) позволяет злоумышленникам добиваться нужных им действий с вероятностью до 70%, при этом не требуя от атакующих высоких привилегий доступа.

Авторы отмечают и другую проблему: современные ИИ-агенты получают доступ к конфиденциальным данным клиентов — финансовой информации, интеллектуальной собственности, юридическим документам и данным о транзакциях в цепочках поставок. В результате существует риск несанкционированного раскрытия этих данных. По статистике, с этим сталкивались почти 25% компаний, а 80% организаций, использующих ИИ-агентов, фиксировали попытки неавторизованного доступа к закрытой информации.

«Критически важными являются ограничение функциональности расширений до минимально необходимого уровня, использование множественных агентов с раздельными ролями вместо универсальных, обеспечение независимости функций безопасности от работы самих ИИ-агентов, а также непрерывный мониторинг с применением ограничений скорости и механизмов автоматического отключения агентов при аномальном поведении», — говорится в докладе.

AM LiveПодписывайтесь на канал "AM Live" в Telegram, чтобы первыми узнавать о главных событиях и предстоящих мероприятиях по информационной безопасности.

Жительница Курска лишилась 444 тыс. руб. после звонка через MAX

В Курске расследуют первый случай мошенничества с использованием мессенджера MAX. Жертвой стала 34-летняя женщина, которая лишилась почти 450 тысяч рублей. По данным МВД, злоумышленники позвонили ей через MAX и разыграли целую комбинацию.

Сначала сообщили о некой посылке и попросили продиктовать код из СМС.

Затем последовал звонок от «сотрудника Роскомнадзора», который убедил женщину, что её уже пытались обмануть, и теперь деньги нужно «спасти», переведя их на «безопасный счёт».

Потерпевшая установила приложение, пошла к банкомату и сделала два перевода: почти 300 тысяч и ещё 150 тысяч рублей. Лишь после третьего звонка она заподозрила неладное и обратилась в полицию.

Один из участников схемы уже задержан — житель города Шахты в Ростовской области. На видео, опубликованном МВД, он признаётся, что был посредником и оставлял себе процент с переведённых средств. Преступной деятельностью занимался с конца июля. Остальных участников пока ищут.

Как пишет Ирина Волк, возбуждено уголовное дело по статье о мошенничестве в крупном размере (ч. 3 ст. 159 УК РФ). Подозреваемому грозит до шести лет лишения свободы.

В МВД отметили, что MAX технически обеспечивает более высокий уровень защиты, чем зарубежные аналоги, но напомнили о базовых правилах безопасности: никому не сообщать коды из СМС, не выполнять операции с деньгами по указанию незнакомцев и проверять личность собеседника.

Напомним, МАХ в июле заблокировал свыше 10 тысяч номеров мошенников. Мы также сообщали, что злоумышленники выдают себя за сотрудников службы поддержки мессенджера MAX и под предлогом подключения дополнительных мер безопасности пытаются получить доступ к личной информации пользователей.

AM LiveПодписывайтесь на канал "AM Live" в Telegram, чтобы первыми узнавать о главных событиях и предстоящих мероприятиях по информационной безопасности.

RSS: Новости на портале Anti-Malware.ru