Власти обеспокоены внедрением зловредов в медицинские приборы

Власти обеспокоены внедрением зловредов в медицинские приборы

Программные ошибки — одна из основных причин, почему медицинские приборы выходят из строя. Администрация научно-технических лабораторий в Управлении по контролю качества пищевых продуктов и лекарственных средств США опубликовала отчёт с угрожающей статистикой: 24% всех поломок в 2011 году списано на ошибки в софте. Другими словами, качество кода всё больше влияет на работу медицинского оборудования.

Программное обеспечения является неотъемлемой частью большого количества медицинских приборов. Размер программ увеличивается, они становятся сложнее и функциональнее. С количеством строк кода растёт и количество ошибок. Это выглядит довольно опасно, ведь от работы медицинских приборов зависят жизни людей, а теперь эти жизни, фактически, в руках программистов. Впрочем, таковы реалии научно-технического прогресса — это неизбежная цена за увеличение сложности медицинского оборудования, которое становится компьютеризированным.

В связи с этим, Управление по контролю качества пищевых продуктов и лекарственных средств (FDA) намерено набрать дополнительных сотрудников в лаборатории, которые занимаются тестированием программ, оценкой их качества и безопасности.

Любопытно, что отчёт FDA опубликован почти в тот же день, когда СМИ облетела новость об инъекции вредоносного кода на сайте медицинской компании, с которого распространялись апдейты для больничных респираторов. Сайт был заражён в течение двух месяцев. Конечно, инъекция не имеет никакого отношения к апдейтам, но можно представить, что в будущем хакеры заинтересуются этой сферой.

Даже эксперты FDA признают такую угрозу. В отчёте сказано, что нужно дополнительно изучить вопрос по «выявлению зловредов в медицинских приборах... и обратному инжинирингу определённых типов зловредов для определения конкретных мер защиты, которые должен применить производитель».

Эксперты по безопасности давно говорят о слабой защите медицинских приборов. Например, в октябре прошлого года хакер Бэрнэби Джек (Barnaby Jack) продемонстрировал способ дистанционного управления инсулиновым имплантатом от компании Medtronic. Атака позволяет с расстояния до 150 метров выпустить смертельную дозу инсулина в организм человека, у которого в теле установлен такой прибор (на фото). Похожую презентацию делали хакеры на конференции DEFCON в августе 2011-го.

Подпишитесь на новости

PT Application Firewall получил защиту от атак на LLM

Корпоративному ИИ-ассистенту доверили документы, клиентские данные и доступ к системам. Теперь осталось проследить, чтобы командовать им не начал первый встречный. Positive Technologies разработала LLM Firewall — модуль защиты ИИ-сервисов в составе PT Application Firewall.

По словам компании, он проверяет запросы к языковым моделям и их ответы: ищет попытки обойти ограничения, вытащить системные инструкции, раскрыть конфиденциальную информацию или использовать возможности агента в интересах атакующего.

Одна из целей — противодействие инъекциям в промпт. Вредоносную инструкцию можно отправить боту напрямую или спрятать в документе, который тот обрабатывает. Внешне это обычный текст, а по замыслу — попытка назначить нейросети нового начальника.

Подозрительные обращения модуль позволяет блокировать либо фиксировать для последующего разбора. Отдельно заявлено обнаружение персональных данных, паролей, ключей доступа, а также токсичного и запрещённого контента.

Проверка работает в обе стороны: контролируется и то, что отправляют модели, и то, что она выдаёт пользователю. Секреты могут утечь не только из-за хитрого атакующего, но и благодаря очень старательному сотруднику.

LLM Firewall уже интегрирован в PT AF Cloud. Он подключается к обмену между приложением и моделью через API, совместимый с OpenAI Chat Completions и Responses. Отдельная консоль управления не требуется. В PT AF PRO для развёртывания внутри инфраструктуры заказчика модуль обещают добавить позднее.

Для разных ИИ-сервисов можно задавать свои политики, выбирать мониторинг или блокировку, отдельно настраивать проверку запросов и ответов. События поступают в PT AF для анализа и расследования.

RSS: Новости на портале Anti-Malware.ru