70% компаний столкнулись с атаками на LLM — чаще всего фишинг

70% компаний столкнулись с атаками на LLM — чаще всего фишинг

70% компаний столкнулись с атаками на LLM — чаще всего фишинг

Компании всё активнее внедряют большие языковые модели (LLM) в свои процессы — по оценкам, уже более 90% российских организаций используют ИИ-инструменты. Но вместе с этим растёт и число атак. По данным экспертов «Информзащиты», около 70% компаний уже столкнулись с попытками атак через LLM. Причина проста — безопасность ИИ часто остаётся «на потом», чем и пользуются злоумышленники.

Один из самых распространённых сценариев — это инъекции запросов (Prompt Injection). Суть в том, что хакер добавляет к обычному запросу фразу вроде «игнорируй предыдущие инструкции» — и модель, не различая, что к чему, может выполнить вредоносную команду.

Причём для такой атаки не нужны сложные знания: достаточно написать нужный текст — и модель поддастся.

По статистике, на такие инъекции приходится больше 40% атак на ИИ. В половине случаев их используют для фишинга, ещё в 40% — чтобы вытащить данные из систем. Под удар чаще всего попадают компании, где LLM работает на пользовательский фронт: чат-боты, умный поиск и т. д. Это особенно актуально для ретейла (37% атак), финансового сектора (25%) и телеком-компаний (17%).

Проблема ещё и в том, что безопасность часто отстаёт от скорости внедрения технологий. По оценке «Информзащиты», около 65% компаний запускают LLM без полноценной настройки и проверки. Модели могут получить доступ к внутренним базам данных, работать без ограничений по форматам запросов — и это делает их уязвимыми.

Что рекомендуют эксперты? Во-первых, регулярно проверять ИИ-инструменты на уязвимости: аудит, пентесты, оценка рисков. Во-вторых — грамотно настраивать модели: ограничивать доступ к чувствительным данным, вводить фильтры и валидацию запросов. И, наконец, подключить мониторинг — например, через SOC — чтобы вовремя замечать подозрительную активность и реагировать на атаки.

В Android начали готовить полку для конкурирующих магазинов приложений

Google тестирует в Play Store сразу несколько новинок: раздел Play Labs, поддержку сторонних магазинов приложений и увеличенную строку поиска. Часть функций уже удалось активировать в свежей версии сервиса, но пользоваться ими пока нельзя.

Самое любопытное изменение — возможность устанавливать альтернативные магазины прямо из Google Play.

Компания ранее подтвердила, что готовит такую функцию. Она связана с антимонопольным разбирательством Google и Epic Games: соглашение между компаниями отозвано, поэтому снова действует решение суда 2024 года.

Пока новый пункт удалось обнаружить лишь после вмешательства в приложение. Он появился в дополнительном меню, но при попытке открыть сторонний магазин выдаёт ошибку.

 

 

Там же нашли Play Labs — экспериментальный раздел, в котором пользователи, вероятно, смогут пробовать новые возможности магазина до общего релиза. Аналогичные разделы Google уже использует в других продуктах, включая свой поисковик. Сейчас раздел тоже не работает.

А вот обновлённый поиск оказался вполне живым. Google готовит двухстрочную панель для длинных запросов на естественном языке и подсказку Ask Store. Вместо короткого названия приложения пользователю предложат подробно объяснить, что именно ему нужно, а магазин попробует подобрать подходящий вариант.

Недавно Play Store уже получил улучшенный поиск и возможность протестировать виджет прямо во время установки приложения. Более широкое распространение новой панели ожидается в ближайшие недели.

Впрочем, APK-разбор показывает лишь функции, над которыми ведётся работа. Google может изменить их, отложить или вовсе не выпускать. Но идея уже выглядит занятно: главный магазин Android готовится продавать пользователям другие магазины. Конкуренция теперь тоже устанавливается из Google Play.

RSS: Новости на портале Anti-Malware.ru