Борцы с погромщиками вооружились технологией распознавания лиц

Борцы с погромщиками вооружились технологией распознавания лиц

Вслед за беспорядками, обрушившихся британскую столицу на выходных в сети появилась новая Google-группа называемая “London Riots Facial Recognition”. Как сообщает ресурс techcrunch.com, цель группы состоит в том, чтобы использовать технологии распознавания лиц, чтобы идентифицировать грабителей, которые попали в объективы фотокамер и затем засветились в интернете.

Группа тщательно обсуждает и координирует каждый свой шаг в темах, озаглавленных  "Вопросы этнических меньшинств" или "Законность - принцип №1". Участники группы также настаивают на использовании информации и изображений полученных только из легальных источников

Однако есть кое-что, вызывающее реальное беспокойство, а именно то, что какая кучка людей через сеть в режиме реального времени будет  пользоваться (а может быть и злоупотреблять?) технологией распознавания лиц, в особенности, если это все будет происходить не под контролем правоохранительных органов. Все вернется к  отнюдь не добрым традициям Средних Веков - к тому, что суд будет вершить толпа, только уже не костром и пытками, а алгоритмами и разнообразными прикладными интерфейсами.

Утром в новом топике прозвучало еще одна предложение, в котором человек предлагал свою помощь в написании инструментария, использующего Face.API, который поможет идентифицировать людей на снимках, опубликованных в  Facebook, Flickr и Twitter.  Для обеспечения более высокой точности распознавания преступников обсуждается даже использование прикладных интерфейсов программирования  Facebook Graph и Twitter  в комбинации с Face.com.

Очевидно, у нас ничего нет против отдаваемых под суд преступников, но одновременно с этим остаются определенные сомнения, связанные с подобной гражданской инициативой. Согласно обсуждению этого вопроса на Hacker News, этот метод может уличать людей, не участвовавших в погромах, но ставших свидетелями указанных событий, или просто в недобрый час пытавшихся добраться до дома. Являются ли их действия здесь законными, можно или нет использовать фотографии, выложенные в интернете, главный вопрос заключается в другом– хотим ли мы совместно вершить правосудие вот таким вот образом?

London Riots Facial Recognition”. Как сообщает ресурс techcrunch.com, цель группы состоит в том, чтобы использовать технологии распознавания лиц, чтобы идентифицировать грабителей, которые попали в объективы фотокамер и затем засветились в интернете." />

Новая вектор атаки заставляет ИИ не замечать опасные команды на сайтах

Специалисты LayerX описали новую атаку, которая бьёт по самому неприятному месту современных ИИ-ассистентов — разрыву между тем, что видит браузер, и тем, что анализирует модель. В результате пользователь может видеть на странице вполне конкретную вредоносную команду, а ИИ при проверке будет считать, что всё безопасно.

Схема построена на довольно изящном трюке с рендерингом шрифтов. Исследователи использовали кастомные шрифты, подмену символов и CSS, чтобы спрятать в HTML один текст, а пользователю в браузере показать совсем другой.

Для человека на странице отображается команда, которую предлагают выполнить, а вот ИИ-ассистент при анализе HTML видит только безобидное содержимое.

Именно в этом и заключается главная проблема. Ассистент смотрит на структуру страницы как на текст, а браузер превращает её в визуальную картинку. Если атакующий аккуратно разводит эти два слоя, получается ситуация, в которой пользователь и ИИ буквально смотрят на разные версии одной и той же страницы.

 

В качестве демонстрации LayerX собрала демонстрационный эксплойт на веб-странице, которая обещает некий бонус для игры BioShock, если выполнить показанную на экране команду. Пользователь, естественно, может спросить у ИИ-ассистента, безопасно ли это. И вот тут начинается самое неприятное: модель анализирует «чистую» HTML-версию, не замечает опасную команду и успокаивает пользователя.

 

То есть атака работает не за счёт взлома браузера или уязвимости в системе, а через старую добрую социальную инженерию, просто усиленную особенностями работы ИИ. Человеку показывают одно, а ассистенту — другое. И если пользователь привык доверять ответу модели, риск становится вполне реальным.

По данным LayerX, ещё в декабре 2025 года техника срабатывала против целого набора популярных ассистентов, включая ChatGPT, Claude, Copilot, Gemini, Leo, Grok, Perplexity и ряд других сервисов. При этом исследователи утверждают, что Microsoft была единственной компанией, которая приняла отчёт всерьёз и полностью закрыла проблему у себя. Остальные в основном сочли риск выходящим за рамки, потому что атака всё же требует социальной инженерии.

RSS: Новости на портале Anti-Malware.ru