Перейти к содержанию
Сергей Ильин

Подготовка комплексного теста проактивной защиты

Recommended Posts

Сергей Ильин

Уважаемые коллеги!

Идея проведения комплексного динамического теста антивирусов уже довольно давно циркулирует в нашем сообществе. Первая волна обсуждений этого сложного теста фактически ни к чему не привела, сейчас самое время это поправить и сделать наконец этот инновационный тест на нашем портале.

Суть теста

Существующие сейчас тесты проверяют лишь отдельные компоненты защиты, зная эффективность которых мы не можем с большой долей достоверности говорить об эффективности системы в целом. Кроме этого, очень важно максимально приблизить условия теста к реальному поведению рядового пользователя. Эти инициативы, впервые сформулированные Symantec, как раз легли в основу разрабатываемой методологии AMTSO.

Концепция теста

Сразу хочу отметить, что смоделировать в тесте 100% реальные условия и учесть абсолютно все невозможно, поэтому далее мы будем говорить лишь о некой модели в научном понимании этого слова. Таким образом, концепцию предстоящего теста можно описать так:

1. Тестируется полный набор компонент антивирусных продуктов или чистых HIPS-продуктов.

2. Используются новейшие (получаемые в режиме реального времени) реально работающие образцы вредоносных программ и реальные пути их распространения.

3. Каждый образец вредоносной программы активируется, как если бы это сделал неопытный пользователь (открытие атачмента в почте или открытие веб-ссылки).

4. Используется типовая на момент проведения теста конфигурация системы (Windows XP SP2, IE 7.0, Outlook).

Как проводить тест?

Чтобы провести такой тест необходимо тестировать антивирусные продукты в режиме реального времени на протяжении установленного периода (предлагаю 2 недели). За это время все поступающие к тестерам вредоносные программы проверяются на работоспособность и оперативно запускаются на машинах с установленными антивирусами. Результаты запуска вредоносных программ фиксируются в таблицу в формате (заражение прошло/остановлено, сработавший компонент защиты, вердикт).

Минимальным количеством новейших вредоносных программ, используемым в тесте предлагаю считать 150 различных образцов (в среднем по 10 в сутки). Несмотря на небольшое абсолютное значение, такое количество образцов, равномерно распространенное по времени тестирования, ИМХО должно обеспечить репрезентативную картину.

Таки образом для проведения теста нам нужно:

1. Стенд с установленными антивирусными программами и HIPS-продуктами (виртуальные машины).

2. Команда тестеров и аналитиков. Первые будут проводить сам тест. Вторые - обеспечивать минимальное количество новых реально работающих вредоносных программ.

Так как тест должен быть приближен к реальности, то должны использоваться настройки по умолчанию, включая обновления антивирусных баз. В качестве тестируемых продуктов я бы предложил все популярные интегрированные продукты ("комбайны") + несколько HIPS-продуктов: DefenceWall HIPS, Safe’n’Sec Pro Deluxe.

Итак, давайте обсуждать предстоящий тест. Старт теста намечен на 1 июля.

P.S. Если есть добровольцы, которые хотели бы поучаствовать в этом тесте, особенно в качестве аналитиков, пишите мне в личку.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
rubin-VInfo
Старт теста намечен на 1 июля.

какого года? :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин

Естественно этого :-)

  • Upvote 5

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Илья Рабинович

Зловреды могут детектировать запуск под виртуальной машиной. Кроме того, я лично сталкивался с одним моментом- под VirtualBox зловред правильно не работал (видимо, там не работали какие-то компоненты ОС), под VirtualPC-работал нормально. Я, например, параллельно гоняю зловреды на нескольких разных виртуалках сразу.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
Зловреды могут детектировать запуск под виртуальной машиной.

Придется выбрасывать таких зловредом из теста, другого варианта я не вижу :( Я не думаю, что их будет много, скорее это единичные случаи.

Есть еще один тонкий момент. Мы будем получать свежие самплы с определенной задержкой, скажем, от 5-12 часов. В этом случае несколько теряется эффект новизны. Как вариант выхода из этого положения могу предложить искусственное устаревание антивирусных, например, на сутки.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Илья Рабинович

Можно искусственно блокировать антивирусные автообновлялки файером либо делать финт ушами- каждый час, например, сохранять снимок виртуальной машины и при тесте просто делать текущий снимок, откатываться к одному из предыдущих соответственно времени вылавливания семпла, тестировать при выключенном автообновлений на лету а затем снова возвращаться к первоначальному состоянию.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Valery Ledovskoy
Цитата(Илья Рабинович @ 17.06.2008, 19:29) *

Зловреды могут детектировать запуск под виртуальной машиной.

Придется выбрасывать таких зловредом из теста, другого варианта я не вижу sad.gif

Говорят, можно реестр подправить так, чтобы детект виртуальных машин не проходил (если он делается по записям в реестре).

Всегда есть хоть один способ что-то сделать и множество причин ничего не делать ;)

  • Upvote 5

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Иван

а можно узнать где вы возьмете свежие самплы?

я бы предложил в качестве источника вашего стратегического партнера, если конечно с ним остались хоть какие-то договоренности.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
а можно узнать где вы возьмете свежие самплы?

я бы предложил в качестве источника вашего стратегического партнера, если конечно с ним остались хоть какие-то договоренности.

Проводим переговоры с крупными сервис-провайдерами. Если не получится или не будет достаточно, то будем добивать сами.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Umnik
Говорят, можно реестр подправить так

"Говорят"... Ключевое слово. :( Я, вот, тоже слышал, что для Вари есть патч, после которого, якобы, WM кошелек перестает понимать, что он работает не в реальном ПК.

А почему нельзя просто отключать ПК от сети, когда не нужно обновлять?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Андрей-001

Есть ли результаты в продвижении этого тестирования?

Спонсоры, инф. поддержка?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
Есть ли результаты в продвижении этого тестирования?

Спонсоры, инф. поддержка?

Мне кажется, здесь ведется речь о методологии теста. Судя по количеству комментариев суть теста мало кто понимает.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин

Коллеги, нам нужен еще кто-то из добровольцев для проведения этого теста. Задача тестера будет состоять непосредственно в том, чтобы под виртуалками ходить по зараженным сайтам :) Если кто-то готов поучаствовать в тесте, то просьба обращаться ко мне лично.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
moJo
4. Используется типовая на момент проведения теста конфигурация системы (Windows XP SP2, IE 7.0, Outlook).

Пораб уже на СП3 перейти

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
Пораб уже на СП3 перейти

Перешли, именно на ней тест и будет.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин

Предлагаю на ваш суд список тестируемых продуктов. Обращаю внимание, что тестироваться будут "комбайны". Таким образом в борьбе за безопасность наших тестеров вендоры могут использовать весь арсенал вооружений :)

1. Agnitum Outpost Security Suite 2009

2. Avast Antivirus Professional 4.8

3. AVG Internet Security 8.0

4. Avira Premium Security Suite 8.0

5. BitDefender Internet Security 2008

6. DrWeb 4.44

7. Eset Smart Security 3.0

8. F-Secure Internet Security 2008

9. Kaspersky Internet Security 2009

10. McAfee Internet Security Suite 2008

11. Microsoft Windows Live OneCare 2.0

12. Panda Internet Security 2008

13. Sophos Anti-Virus 7.3

14. Symantec Internet Security 2008

15. Trend Micro Internet Security 2008

16. VBA32 Workstation 3.12.9

+ HIPSы для сравнения:

1. DefenseWall HIPS 2.45

2. Safe’n’Sec Pro 2.5

Может быть еще какой-то один HIPS взять?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Илья Рабинович

Можно взять или Norton Antibot, или PCTools ThreatFire или SandboxIE. Все они достаточно популярны в узких кругах приближенных к истине. :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
guest08

Если вы тестируете комбайны, то надо брать не Avira Antivir Premium, а Avira Premium Security Suite.

Также интересно было бы увидеть что-нибудь новое, например PC Tools Internet Security, Zone Alarm Internet Security Suite. Также можно включить Ikarus-в некоторых тестах он показывал хорошие результаты, что весьма странно.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Deja_Vu

у Ikarus'a полно ложных срабатываний.

И про какие тесты вы говорите? ((-

(а с Авирой, скорее всего опечатка -)) конечно же Avira Premium Security Suite нужно)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
Если вы тестируете комбайны, то надо брать не Avira Antivir Premium, а Avira Premium Security Suite.

Опечатка, естественно Avira Premium Security Suite надо брать.

Также интересно было бы увидеть что-нибудь новое, например PC Tools Internet Security, Zone Alarm Internet Security Suite.

Zone Alarm Internet Security можно взять, мы его тестили на самозащиту кстати. Слишком много продуктов не можем брать, так как это все время и ресурсы тестировщиков.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
guest08
у Ikarus'a полно ложных срабатываний.

И про какие тесты вы говорите? ((-

К сожалению, я не юзал икарус и не знаю о ложных срабатываниях, но я вижу на вирустотале, когда проверяю подозрительные файлы, что икарус часто определяет вирус, в то время как другие антивирусы нет. Затем файлы отправляю на исследования в ЛК или Dr.Web Lab, и они подтверждают наличие вредоносного кода и сообщают о занесении в базу.

Про тесты-например, тесты на вирусинфо, там у икаруса хорошие результаты вполне. + этот тест http://www.anti-malware.ru/forum/index.php?showtopic=4956 хоть он может не столь важный, но все равно.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
dr_dizel
Может быть еще какой-то один HIPS взять?

Может от Online Solutions, например, OSPD?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Deja_Vu
К сожалению, я не юзал икарус и не знаю о ложных срабатываниях, но я вижу на вирустотале, когда проверяю подозрительные файлы, что икарус часто определяет вирус, в то время как другие антивирусы нет. Затем файлы отправляю на исследования в ЛК или Dr.Web Lab, и они подтверждают наличие вредоносного кода и сообщают о занесении в базу.

Про тесты-например, тесты на вирусинфо, там у икаруса хорошие результаты вполне. + этот тест http://www.anti-malware.ru/forum/index.php?showtopic=4956 хоть он может не столь важный, но все равно.

Он просто кричит на все что подозрительно, но врят ли вам будет комфортно во время работы, когда Ikarus будет кричать на вполне безобидные программы.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Dexter
Задача тестера будет состоять непосредственно в том, чтобы под виртуалками ходить по зараженным сайтам :)

...Может быть еще какой-то один HIPS взять?

Для этого теста неплохо подергать и древний бесплатнейший DropMyRights.

Он тоже может быть "достаточно популярен в узких кругах приближенных к истине". :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Deja_Vu

Кстати.. а почему тестируется Microsoft Windows Live OneCare 2.0, а не Microsoft Windows Live OneCare 2.5?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Создайте учетную запись или войдите, чтобы комментировать

Вы должны быть пользователем, чтобы оставить комментарий

Создать учетную запись

Зарегистрируйте новую учётную запись в нашем сообществе. Это очень просто!

Регистрация нового пользователя

Войти

Уже есть аккаунт? Войти в систему.

Войти

  • Сообщения

    • Booi77Casino
    • Booi77Casino
    • AM_Bot
      Российский разработчик систем информационной безопасности «Гарда Технологии» (входит в «ИКС Холдинг») выпустил пятую версию аппаратно-программного комплекса «Периметр». Комплекс представляет собой решение для защиты от сетевых атак отказа в обслуживании (DDoS-атаки) на сетях оператора связи.    ВведениеНовая функциональность АПК «Периметр» 5.0Обнаружение атак и сокращение времени обнаруженияОбъединение векторов DDoS-атакМногоуровневое подавление DDoS-атакИндивидуальная настройка методов подавления различных векторов атакРабота с трафиком HTTPSВзаимодействие с клиентским устройствомРасширение отчетной информацииПолная поддержка «горячего» резервированияТранзакционная модель изменения конфигурацииОбратное разрешение IP-адресовВыводы ВведениеПятая версия аппаратно-программного комплекса «Периметр» получила обновленные механизмы обнаружения и подавления, позволяющие эффективно реагировать на современные угрозы DDoS-атак. Новая функциональность АПК «Периметр» 5.0:обнаружения DDoS-атак на основе сигнатур;оптимизация механизмов и сокращение времени обнаружения атаки до 20 секунд;объединение векторов, идущих на один защищаемый объект, в рамках одной DDoS-атаки;многоуровневое подавление DDoS-атаки;индивидуальная настройка методов подавления векторов;расшифровка HTTPS-трафика и применение к нему методов фильтрации протокола HTTP;расширение взаимодействия операторского и клиентского устройства;расширение отчётной информации;полная поддержка «горячего» резервирования;транзакционная модель изменения конфигурации;возможность обратного разрешения IP-адресов источников и назначений трафика атаки. Обнаружение атак и сокращение времени обнаруженияВ новой версии обнаружение атак осуществляется на основе сигнатур, создаваемых администратором комплекса. Каждая сигнатура описывает вектор атаки: набор характеристик трафика атаки на специальном языке описания сигнатур.В качестве вектора атаки может быть задан как определенный класс атак, например, TCP flood attack или UDP amplification attack, так и конкретные атаки в пределах одного класса, например, NTP amplification, SSDP amplification или ping flood (ICMP echo-request flood), Smurf/Amplification attack, Common ICMP flood.Администратору комплекса доступно 100 сигнатур, которые могут быть адаптированы с учетом потребностей защищаемых клиентов, а индивидуальная настройка пороговых значений трафика для отдельных векторов атак позволяет уменьшить вероятность ложных обнаружений, учитывая характер трафика защищаемых клиентов.Комплекс позволяет обнаруживать DDoS-атаку при значительном превышении пороговых значений трафика не позднее чем через 20 секунд после поступления информации о трафике атаки. Объединение векторов DDoS-атакОбнаруженные комплексом векторы атак, направленные на один узел сети (или одну группу узлов сети при работе детектора в режиме объединения трафика хостов), могут быть объединены в рамках одной атаки. Информация как по трафику атакуемого узла (группы узлов), так и по выявленным векторам атак отображается на одном экране, что позволяет определить характеристики трафика, которые вносят наибольший вклад в трафик атаки, в том числе и по отдельным векторам атак. Эта информация позволяет оптимально подавлять атаки, минимизируя влияние на трафик легитимных пользователей. Рисунок 1. Объединение векторов DDoS-атак  Многоуровневое подавление DDoS-атакДля подавления атак используется система фильтрации комплекса и возможности маршрутизирующего оборудования (BGP FlowSpec и Blackhole). Новая версия позволяет использовать эти инструменты совместно как в ручном, так и в автоматическом режимах. Это дает возможность организовать многоуровневую защиту клиента: при различных уровнях опасности атаки будут использоваться различные инструменты подавления.Например, атаки на защищаемый ресурс, не превышающие 10 Гбит/с, фильтруются на системе очистки. При увеличении объема атаки до 20 Гбит/с, фильтрация выполняется с применением инструмента BGP FlowSpec. При увеличении объема атаки свыше 80 Гбит/с, применяется инструмент Blackhole. Индивидуальная настройка методов подавления различных векторов атакВ новой версии расширены возможности автоматического противодействия DDoS-атакам. Доступен выбор способов индивидуальной фильтрации для каждой сигнатуры (вектора) атаки. При обнаружении вектора будут включаться только те методы, которые эффективны при его подавлении.Например, если атака начинается с вектора TCP SYN flood, то при фильтрации комплекс задействует настроенные для этого вектора атаки методы (например, метод syn-cookie). При развитии атаки и появлении дополнительного вектора NTP-amplification комплекс добавит к фильтрации методы по этому вектору (например, фильтрация по протоколу и порту источника на системе фильтрации или правила BGP-Flowspec). При завершении вектора атаки, методы по нему будут выключены.В случае необходимости, пользователь может вмешаться в процесс автоматической фильтрации и внести дополнительные изменения.Данные механизмы позволяют выполнять фильтрацию, которая гибко адаптируется под развитие DDoS-атаки. Работа с трафиком HTTPSАПК «Периметр»  позволяет эффективно защищать web-серверы как от объемных DDoS-атак, направленных на исчерпание полосы пропускания каналов связи или ресурсов сетевого оборудования, так и от атак уровня приложений, направленных на ресурсы самого web-сервера, в том числе и от медленных атак. Поскольку подавляющее большинство web-серверов использует в качестве протокола взаимодействия с клиентом HTTPS, в новой версии реализован механизм расшифровки HTTPS-трафика. Это позволяет применять методы анализа и фильтрации протокола HTTP к расшифрованному трафику.Например, если защищаемый ресурс предоставляет web-сервис по протоколу HTTPS, то для защиты этого сервиса можно использовать расшифровку трафика и применение к нему методов аутентификации пользователей (HTTP-аутентификация), а также ведение HTTP-журнала и построение статистики запросов и ответов для определения источников, атакующих сервис. Взаимодействие с клиентским устройствомУправление операторским комплексом осуществляет команда инженеров оператора связи и решает следующие задачи по защите от DDoS-атак:предоставление клиентам услуг защиты;защита большого количества клиентов;подавление атак большого объема на системе очистки и границе сети. Рисунок 2. Операторский комплекс  Если у клиента оператора связи есть потребность самостоятельно выполнять полную или частичную защиту собственных ресурсов, а также иметь возможность при необходимости воспользоваться ресурсами операторского комплекса, он может воспользоваться решением «Скаут», разработанным в ООО «Гарда Технологии». Рисунок 3. Схема работы решения «Скаут»  Решение «Скаут»:позволяет выполнять защиту на этапе установки TCP-соединений путем полного проксирования с минимальной задержкой на аутентификацию;аналогично операторскому комплексу, «Скаут» выполняет защиту шифрованного трафика как за счет контроля устанавливаемых SSL-соединений, так и за счет расшифровки SSL-трафика и применения к нему различных методов фильтрации протоколов уровня приложений: HTTP, DNS, SIP и т.д.находится под управлением клиента, что позволяет избежать передачи конфиденциальной информации, например, сертификатов безопасности web-серверов третьим лицам;может взаимодействовать с операторским АПК «Периметр» в случае необходимости подавления атак большого объема с использованием центров очистки оператора связи, а также инструментов подавления на границе сети оператора. Рисунок 4. Взаимодействие «Скаута» и оператора связи  Атаки небольшого объема фильтруются на стороне клиента. Рисунок 5. Фильтрация на стороне клиента  В случае появления атак, фильтрация которых требует больших ресурсов, отправляется запрос операторскому комплексу. Рисунок 6. Операторский комплекс выполняет фильтрацию  В новой версии операторский комплекс кроме запроса на подавление атаки через центр очистки оператора принимает от клиентского устройства:области адресного пространства клиента, к которым необходимо применить фильтрацию;черный и белый списки адресов, которые могут быть использованы при фильтрации в центре очистки оператора. Расширение отчетной информацииВ набор аналитических отчетов АПК «Периметр» 5.0 добавлены отчеты:по аппроксимации объемов IPv6-трафика на будущие периоды времени;о транзитном трафике (по приложениям, странам, сетевым элементам, протоколам, автономным системам);о трафике виртуальных сетей (VPN). Полная поддержка «горячего» резервированияКаждый модуль АПК «Периметр» обладает возможностью «горячего» резервирования. При отказе модуля, происходит автоматическое переключение на резервный. Это позволяет обеспечивать высокую отказоустойчивость комплекса. Транзакционная модель изменения конфигурацииВ АПК «Периметр» добавлен режим работы, в котором каждое изменение конфигурации фиксируется для подтверждения администраторами комплекса. Изменения могут быть применены или отменены. Транзакционная модель позволяет контролировать изменения, вносимые в конфигурацию комплекса, не допуская применение случайных или недопустимых изменений, а также выполнять одновременное применение изменений, сделанных через графический интерфейс. Например, создание защищаемого объекта, настройка для него параметров детектирования и подавления, настройка уведомлений для клиента, - всё это будет применено в рамках одного изменения конфигурации. Обратное разрешение IP-адресовТакая функция позволяет получать дополнительную информацию об IP-адресах, используя сервисы DNS и WHOIS для источников и получателей трафика. Например, для IP-адреса источника можно получить полное доменное имя, используя сервис DNS, а также информацию о регистраторе и принадлежности к сетевому префиксу, используя сервис WHOIS. ВыводыАПК «Периметр» позволяет обнаруживать DDoS-атаки на сетях операторского класса, корпоративных сетях, сетях центров обработки данных с объемами сетевого трафика от единиц Гбит/с до десятков Тбит/с.Кластеры очистки, входящие в состав АПК «Периметр», позволяют защищаться от DDoS-атак объемом до 640Гбит/с. Читать далее
    • Alushaa
      Весьма удобное приложение, с помощью  которого можно смотреть расписание электричек. Это очень интересный вариант, можете присмотреться, он действительно крутой и я там все спокойно скачиваю)
    • PR55.RP55
      SQx То, что я выше написал сделать можно -  если есть доступ к PC. Однако не при работе со скриптом. Я  для Demkd  написал. В скрипт добавлять команды типа: adds criterion delref   fuckyoumm2_filter Checks the list by criterion т.е. добавлен критерий ( с выбором типа команды ) >  проверяется список > найденный по критерию объект удаляется.      
×