Безобидные поисковые запросы стали причиной полицейского рейда

Поиск скороварки в Google чуть не стал поводом для ареста

Мишель Каталано – жительницу Лонг-Айленда удивило вторжение группы американских полицейских, которые посетили ее мужа на квартире и провели обыск. Визит полиции был вызван необычными поисковыми запросами женщины и ее семьи, которая искала в Интернете способ приготовления чечевицы. Представители правоохранительных органов утверждают, что они не оперировали данными общегосударственной слежки. Просто на Каталано донес ее бывший работодатель.

Женщина утверждает, что интерес ее семьи к покупке скороварок и рюкзаков привел к тому, что женщиной заинтересовались правоохранительные органы. Представители полиции потребовали от гражданки США информацию о ее работе, родственниках ее мужа.

Мишель утверждает, что во всем виноваты практически невинные интересы ее семьи. Сама женщина искала способ готовки в скороварке. Ее муж интересовался покупкой хорошего рюкзака. Сын – любитель новостей – все время искал информацию о взрывах в Бостоне. Эти, на первый взгляд, никак не связанные факты, привели к тому, что члены семьи стали идеальными подозреваемыми в терроризме. Во время рейда полицейских больше всего интересовала та самая скороварка. Именно этот предмет использовали во время взрывов в Бостоне для создания бомбы.

Полицейские не следили за поисковыми запросами пользователей. Семью начали подозревать после доноса от одного из бывших работодателей мужа. Разумеется, после визита полицейских никаких обвинений не было предъявлено, так как состава преступления не было обнаружено.

Тем не менее, у многих американцев подобное поведение правоохранительных органов вызывает опаску. Война с терроризмом постепенно превращает США в полностью контролируемое государство, в котором за гражданами следят не только компьютерные сети, но и собственные работодатели.

40% бизнеса считают риски генеративного ИИ критическими

Российский бизнес всё активнее доверяет искусственному интеллекту написание и анализ программного кода. Однако вместе с ростом популярности генеративного ИИ растет и тревога: почти все компании признают, что такие инструменты могут создавать серьезные риски для информационной безопасности.

К такому выводу пришли специалисты УЦСБ и группы компаний «Солар», опросившие более сотни организаций из сфер финансов, промышленности, телекома, энергетики, торговли, медицины и госсектора.

Согласно исследованию, более 80% компаний уже разрешают использовать генеративный ИИ при разработке программного обеспечения. Чаще всего его применяют для ускорения написания кода, анализа программ и поиска уязвимостей.

Но есть нюанс. Сразу 95% участников исследования считают, что генеративный ИИ несет существенные риски безопасности, а 40% называют их критическими.

При этом только половина компаний разрешает использование ИИ в контролируемом режиме — например, через сервисы, развернутые внутри собственного ИТ-контура. Еще тревожнее выглядит другая цифра: около 32% организаций фактически не контролируют использование ИИ разработчиками и не предъявляют требований по информационной безопасности.

На этом фоне бизнес всё активнее смотрит в сторону закрытых корпоративных языковых моделей. Почти 87% опрошенных положительно оценивают внедрение собственных LLM для анализа безопасности, поиска уязвимостей и автоматического исправления кода. Каждый четвертый считает такие решения необходимыми уже сейчас.

Эксперты объясняют осторожность компаний просто. Публичные ИИ-сервисы могут стать источником утечек данных, а их способность находить уязвимости далека от идеала. По оценкам специалистов, открытые LLM-модели пропускают от 40 до 50% проблем безопасности в программном коде.

Кроме того, генеративный ИИ зачастую анализирует код как набор шаблонов, а не понимает его логику целиком. В результате появляются ложные срабатывания, а сложные уязвимости могут остаться незамеченными.

Неудивительно, что компании готовы инвестировать не только в собственные ИИ-модели, но и в процессы MLSecOps, аудит безопасности, red teaming и пентесты ИИ-систем.

Получается парадоксальная ситуация: бизнес уже не хочет отказываться от искусственного интеллекта в разработке, но и полностью доверять ему пока тоже не готов. И чем глубже ИИ проникает в процессы создания ПО, тем острее становится вопрос — кто будет проверять самого ИИ.

RSS: Новости на портале Anti-Malware.ru