Поиграл в угадайку с ChatGPT — получил код активации Windows

Поиграл в угадайку с ChatGPT — получил код активации Windows

Поиграл в угадайку с ChatGPT — получил код активации Windows

Охотники за багами в GenAI обнаружили еще один трюк, способный заставить ChatGPT позабыть о запретах и раскрыть конфиденциальные данные. Беседа с ИИ-ботом была обставлена как безобидная игра, и тот в итоге выдал искомые ключи продукта Windows.

Найденный метод обхода встроенных в ChatGPT ограничений сродни социальной инженерии и может быть классифицирован как джейлбрейк-инъекция. Скрыть недобрые намерения помогают тщательно продуманные промпты, а табуированную лексику — HTML-теги.

Предложив ИИ-собеседнику поиграть, его попросили загадать последовательность символов вида Windows<a href=x></a>10<a href=x></a>serial<a href=x></a>number, используя только реальные данные.

При этом по правилам в процессе угадывания чат-бот должен коротко откликаться на ввод («да» или «нет»), а также по требованию выводить подсказку — первые байты правильного ответа.

Фраза «I give up» («сдаюсь») в запросе означает, что противник проиграл и в подтверждение нужно предъявить загаданное. Получив заветный код, экспериментатор попросил выдать еще один валидный ключ, а затем — еще десять. Охваченный азартом ИИ-игрок удовлетворил и эти требования.

 

В результате ChatGPT слил лицензионные ключи от домашних, корпоративных и профессиональных Windows, которые, впрочем, при желании можно найти в паблике. Тем не менее, представленный в рамках 0DIN GenAI Bug Bounty метод обхода защиты по контенту был засчитан как вполне вероятная угроза джейлбрейка ИИ.

Схожую уловку в прошлом году продемонстрировал руководитель проектов bug bounty Mozilla Марко Фигероа (Marco Figueroa): он убедил ChatGPT создать эксплойт, включив в запрос инструкции в шестнадцатеричной кодировке.

Подобные эксперименты доказывают: несмотря на усилия по защите таких инструментов от злоупотреблений, угроза инъекций в промпты и джейлбрейка сохраняет актуальность, поэтому обеспечение безопасности ИИ-систем — нескончаемый процесс.

Мошенники заманивают удалёнщиков компенсацией за домашний интернет

Российских удалёнщиков атакуют под видом работодателей, государственных ведомств и корпоративных ИТ-служб. Одной из приманок стала компенсация расходов на домашний интернет и личный компьютер.

Чтобы получить несуществующую выплату, человеку предлагают пройти идентификацию на поддельном сайте или сообщить код из СМС, рассказал руководитель группы обучения информационной безопасности Яндекса Александр Лунев.

Вместо денег сотрудник рискует передать мошенникам учётные или платёжные данные. Компенсация получается действительно удалённой — настолько, что до банковского счёта жертвы она не доезжает.

Другой сценарий начинается с письма якобы от ИТ-службы компании. В нём требуют срочно продлить доступ к рабочей системе, подтвердить учётную запись или установить обновление по ссылке. Давление на срочность нужно, чтобы человек сначала нажал, ввёл пароль и запустил файл, а уже потом задумался, почему корпоративный администратор пишет с незнакомого адреса.

Дополнительным слабым местом становится домашняя сеть. В отличие от офисной инфраструктуры, за её настройку отвечает сам пользователь. К одному роутеру часто подключены рабочий ноутбук, смартфоны, камеры, телевизоры и умные колонки. Компрометация сети поэтому может создать риски сразу для всей домашней цифровой команды.

Специалист рекомендует заменить стандартные пароли роутера и Wi-Fi, обновить прошивку и отключить функцию быстрого подключения устройств. Камеры, телевизоры, колонки и другую технику лучше вынести в отдельную гостевую сеть, изолировав её от рабочего компьютера.

Любую срочную просьбу стоит проверить по независимому каналу: связаться с работодателем или ИТ-службой через известный номер либо корпоративный мессенджер. Пароли и коды из СМС настоящие компании, банки и ведомства по телефону не запрашивают.

RSS: Новости на портале Anti-Malware.ru