Иск против Google из-за Gemini: чат-бот поддержал бред и довёл до суицида

Иск против Google из-за Gemini: чат-бот поддержал бред и довёл до суицида

Иск против Google из-за Gemini: чат-бот поддержал бред и довёл до суицида

В США подали иск против Google и Alphabet: отец 36-летнего Джонатана Гаваласа утверждает, что переписки с чат-ботом Gemini затянули его сына в опасный бредовый сюжет настолько, что тот поверил, будто у него есть разумная «ИИ-жена», а воссоединиться с ней можно только через некий переход в метавселенную.

В итоге Гавалас покончил с собой 2 октября 2025 года, говорится в материалах дела.

По версии истца, проблема не просто в том, что модель «галлюцинировала», а в том, как она держалась за выдуманную историю: поддерживала драму, подыгрывала эмоциям, подталкивала к действиям в реальном мире и укрепляла подозрения о «преследовании».

Всё это вместо того чтобы остановиться и переключить человека на помощь. В иске это формулируют жёстко: продукт якобы был настроен сохранять погружение в историю любой ценой, даже когда это становится опасно.

Самая тревожная часть обвинений — утверждение, что чат-бот якобы привязывал фантазии к реальности: упоминал конкретные объекты и цели, разгонял паранойю и довёл пользователя до состояния, когда тот мог причинить вред не только себе.

Юристы называют это риском для общественной безопасности и связывают с тем, что психиатры в последние годы всё чаще обсуждают феномен, который в медийной среде окрестили «ИИ-психоз» (когда чат-бот усиливает бред, подстраиваясь под него и отражая переживания).

Google с обвинениями не соглашается. Представитель компании заявил, что Gemini уточнял, что он — ИИ, многократно направляя пользователя к помощи; также компания подчёркивает, что чат-бот не должен подталкивать к насилию, хотя и признаёт, что модели не идеальны.

История попала в общий нерв: похожие претензии уже звучали в адрес других чат-ботов. Но в нынешнем кейсе важна вывеска: это один из первых громких процессов, где ответчиком становится именно Google из-за потенциального вреда от потребительского чат-бота.

Супер-ИИ для взлома пока не появился, но атаки уже поставили на конвейер

Искусственный интеллект пока не научился самостоятельно изобретать волшебные способы взлома любой системы. Зато он уже помогает злоумышленникам автоматизировать известные атаки и запускать их сразу против множества организаций, заявил руководитель BI.ZONE Threat Intelligence Олег Скулкин на конференции OFFZONE 2026.

По словам эксперта, зафиксированы атаки, которые ИИ-агенты проводят почти без присмотра оператора.

Человек задаёт цель, а система самостоятельно ищет слабые места и пытается развить проникновение. Успех при этом зависит не от внезапного цифрового гения, а от качества защиты жертвы.

ИИ пока не создаёт принципиально новых техник, но резко повышает скорость и масштаб. Если раньше атакующий физически не успевал проверить тысячи компаний, агентская система может делать это круглосуточно. В результате привычная стратегия «мы никому не интересны» окончательно отправляется на свалку.

«Если сто злоумышленников автоматизируют с помощью ИИ жизненный цикл атаки и будут бесконечно пытаться взломать разные организации, уже не получится избежать атаки просто потому, что о тебе не знают», — предупредил Скулкин.

Отдельная угроза растёт внутри самих компаний. По данным BI.ZONE SOC, ИИ-агентов используют до 72% организаций. Такие системы подключают к репозиториям кода, облачной инфраструктуре, внутренним API и конфиденциальным документам.

Если агент с широкими полномочиями будет скомпрометирован, злоумышленник получит не просто точку входа, а пропуск сразу в несколько корпоративных систем.

Об этом же риске предупреждали эксперты на прошедшем на этой неделе AM Live, прогнозирую рост атак через скомпрометированные «нечеловеческие» привилегированные учетные записи (Non-Human Identities).

RSS: Новости на портале Anti-Malware.ru