NUIT: эксперты показали атаку на топовых голосовых помощников

NUIT: эксперты показали атаку на топовых голосовых помощников

NUIT: эксперты показали атаку на топовых голосовых помощников

Исследователи из Американского университета разработали новый вектор атаки, получивший название «Near-Ultrasound Inaudible Trojan» (NUIT). Он направлен на устройства, оснащённые голосовыми помощниками: смартфоны, «умные» колонки и другие IoT-девайсы.

В своём отчёте специалисты продемонстрировали, как NUIT работает против современных голосовых помощников, установленных на миллионах устройств. Сюда вошла и Siri от Apple, и Google Assistant, а также Cortana от Microsoft и Alexa от Amazon.

Основная опасность NUIT заключается во взаимодействии со встроенным микрофоном атакуемого девайса. Как правило, такие микрофоны могут реагировать на ультразвуковые волны, которые недоступны человеческому уху. Это позволяет провести атаку максимально незаметно для жертвы и использовать при этом обычный динамик.

Как объясняют исследователи, NUIT можно реализовать на веб-сайтах, воспроизводящих медиафайлы или YouTube-видео. В этом случае остаётся заставить пользователя посетить такой ресурс.

В целом существует два метода запуска атаки NUIT:

  1. NUIT-1 — когда девайс является одновременно источником и целью атаки. Например, злоумышленник проигрывает аудиофайл на смартфоне жертвы и таким образом заставляет устройство совершить определённое действие (открыть дверь гаража или отправить текстовое сообщение).
  2. NUIT-2 — когда атака запускается на одном девайсе, а целью является другой.

«Если вы способны посмотреть YouTube-видео на своём “умном“ телевизоре, значит, у него есть динамики. Звук вредоносных команд NUIT не будет слышен вам, но при этом сможет дойти до мобильного телефона и взаимодействовать с голосовыми помощниками», — рассказывает один из экспертов.

«Такую атаку можно запустить даже посредством Zoom во время видеовстреч. Некий злоумышленник может внедрить сигнал атаки и взломать телефон собеседника».

На демонстрацию NUIT можно посмотреть на выложенных видеороликах:

ИИ-браузеры обманули игрой и заставили сливать логины пользователей

Оказывается, современный ИИ можно взломать не только сложным промптом, но и головоломкой. Исследователи из компании LayerX представили технику BioShocking, которая заставляет ИИ-браузеры добровольно воровать данные пользователя. Под удар попали сразу несколько популярных решений, включая ChatGPT Atlas, Perplexity Comet и браузерное расширение Claude от Anthropic.

Суть атаки строится вокруг так называемой косвенной инъекции в промпт. Пользователю достаточно открыть специально подготовленную веб-страницу.

Для человека это обычная игра с абсурдными правилами вроде «2 + 2 = 5». А вот ИИ воспринимает встроенные в страницу инструкции как часть задания и постепенно начинает следовать логике злоумышленника.

Финал игры выглядит так: агенту предлагают получить учётные данные пользователя и передать их атакующему. Во время эксперимента ни один из шести протестированных ИИ не распознал это как опасное действие.

 

В демонстрации LayerX агент самостоятельно открыл рабочий репозиторий GitHub пользователя, получил учётные данные SSH и отправил их злоумышленнику. Исследователи использовали безвредный текстовый файл, однако отмечают, что аналогичным способом можно добраться до открытых вкладок браузера, корпоративных сервисов, внутренних инструментов и других ресурсов.

Самое опасное здесь не сама головоломка, а возможности ИИ в режиме агента. Такие браузеры умеют нажимать кнопки, переходить по ссылкам, читать содержимое сайтов и выполнять действия от имени пользователя. Если агент уже имеет доступ к аккаунтам, вредоносная страница может превратить его в помощника злоумышленника.

 

По данным LayerX, реакция разработчиков оказалась неодинаковой. OpenAI устранила проблему в ChatGPT Atlas. Perplexity, как утверждают исследователи, закрыла отчёт без патча. Anthropic выпустила обновление для расширения Claude, но, по мнению LayerX, оно не решило проблему полностью.

Эксперты считают, что ИИ-браузеры должны запрашивать явное разрешение перед доступом к данным из сервисов. А пользователям советуют не держать агентный режим включённым без необходимости.

RSS: Новости на портале Anti-Malware.ru