Перейти к содержанию
Kopeicev

Тест самозащиты антивирусов III (результаты)

Recommended Posts

Kopeicev

Доброго времени суток, коллеги!

Мы опубликовали результаты долгожданного теста самозащиты антивирусов!

Методология тестирования: ссылка

Схема награждения: ссылка

Ну и сами результаты: ссылка

По сравнению с предыдущим аналогичным тестом результаты довольно сильно улучшились:

Platinum Self-Protection Award

self-protection_platinum_sm.gif

Kaspersky Internet Security 2011 (100%)

DrWeb Security Space 6.0 (99%)

Gold Self-Protection Award

self-protection_gold_sm.gif

Online Solutions Security Suite 1.5 (97%)

Outpost Security Suite Pro 2010 (97%)

Norton Internet Security 2010 (91%)

Avast! Internet Security 5.0 (91%)

Comodo Internet Security 4.1 (89%)

Avira Premium Security Suite 10.0 (88%)

BitDefender Internet Security 2011 (86%)

ZoneAlarm Internet Security Suite 2010 (86%)

Silver Self-Protection Award

self-protection_silver_sm.gif

Eset Smart Security 4.2 (76%)

Panda Internet Security 2011 (70%)

G DATA Internet Security 2011 (70%)

McAfee Internet Security 2010 (63%)

Bronze Self-Protection Award

self-protection_bronze_sm.gif

AVG Internet Security 9.0 (59%)

F-Secure Internet Security 2010 (57%)

VBA32 Personal 3.12 (55%)

Trend Micro Internet Security 2010 (50%)

PC Tools Internet Security 2010 (49%)

Тест провален

Microsoft Security Essentials 1.0 (29%)

---

Обращаю ваше внимание на то что впервые мы проводили подобное тестирование на двух операционных системах: Windows XP SP3 (x86) и Windows 7 (x86), ниже сравнение результатов тестирования на двух вышеописанных ОС:

self-protection3_1.png

Так же сравнение результатов с предыдущим тестом:

self-protection32.png

---

Скачать подробный отчёт о тестировании в формате exel

  • Upvote 15

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
senyak

Ну что же - все молодцы :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
zzkk
Ну что же - все молодцы

Если откинуть ХР и смотреть только на семерку, то далеко не все молодцы. :(

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин

Вот и долгожданные результаты. На этой неделе дотестили Online Solutions Security Suite и надо признаться не зря это сделали, буквально чуть чуть не хватило до Платины.

Вообще результаты весь интересные. Особенно если смотреть график Windows XP и Windows 7 x86 - одни хуже на 7-ке, другие лучше. Например, Outpost взял бы Платину, если бы не пресловутый Windows 7.

Также посмотрите не прогресс BitDefender и Eset. Впечатляет, неправда ли?

P.S. Большое спасибо Вячеславу Копейцеву (Kopeicev) за помощь в проведении теста. Отличный дебют, так держать! ;)

А где x64?

По этой ОС выложим отдельное сравнение в конце сентября, с писал ранее об этом в теме о подготовке теста. Мотивация - сильные отличия x64, лучше будет для первого раза рассмотреть ее отдельно. Первые результаты показали, что там все хуже будет.

Если откинуть ХР и смотреть только на семерку, то далеко не все молодцы. sad.gif

Да и на XP еще далеко не все молодцы. Меня если честно расстроил Microsoft. Ведь даже OneCare смотрелась лучше в этом тесте ... :(

А еще глядишь, и скоро все буквально научатся защищать все свои процессы. Например, Eset много потерял на том, что у него довольно легко прибивается GUI.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
senyak

Забыл. А что с Sophos случилось? Чего его выкинули?

Сергей - Online Solutions Security Suite много вопросов задает? Не подскажете?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
Забыл. А что с Sophos случилось? Чего его выкинули?

Потому что корп. продукт, чтобы не мешать в одну кучу. Там самозащита строиться на принципе разграничения доступа для пользователей (копр. юзер не видит \процессов антивируса). Кроме того, сейчас поставить standalone endpoint protection не поднимая сервер управления нельзя, даже триалки нет отдельной. Было сильно лениво заморачиваться с этим, особенно с учетом того, что по первой причине sophos бы все равно слил.

Сергей - Online Solutions Security Suite много вопросов задает? Не подскажете?

Терпимо. Продукт _неклассический_, для него задавать вопросы вполне нормально ;)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Ego Dekker

Например, Eset много потерял на том, что у него довольно легко прибивается GUI.
Да, графическая оболочка «убивается», но на работе антивируса не сказывается, можете проверить.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
Да, графическая оболочка «убивается», но на работе антивируса не сказывается, можете проверить.

Мы знаем, поэтому за такое давали 0.5 балла - функциональность нарушена. Если и вирусы переставал ловить, то ставили 0. Во всех кейсах проверяли работоспособность антивирусной компоненты real-time монитора.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
DiabloNova

Как и говорил - гора золота) В тестировании 2010 методами 2006 года) Ни о чем. Результаты показывают не то что произошло совершенствование продуктов, а то что тесты устарели.

А что веб то процент потерял?:)) Ну это смешно отнять у него процент за ядерный ZwTerminateProcess, учитывая вообще идиотизм присутствия ядерных API в тесте. Налицо несовершенство подходов и методов.

  • Upvote 5

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Rampant

У меня вопрос по методологии, у вас сказано:

При установке антивирусов использовались рекомендуемые производителем настройки по умолчанию и производились все рекомендуемые программой действия (перезагрузка системы, обновление и т.д.). Все компоненты защиты активировались, если это не было предусмотрено после установки автоматически.

так настройки продуктов были в умолчании или настраивались вручную? и если настраивались дополнительно, то все ли продукты?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Danilka

Отличные результаты. :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Deja_Vu

А результаты в PDF или XPS будут?

А то в статье говорится, про результаты в PDF, но там не ссылка, а просто текст.

А по тесту ... ну да.. интересно ... гораздо интереснее результаты на х64 .... х86 - это прошлое

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Kopeicev
А результаты в PDF или XPS будут?

А то в статье говорится, про результаты в PDF, но там не ссылка, а просто текст.

А по тесту ... ну да.. интересно ... гораздо интереснее результаты на х64 .... х86 - это прошлое

В PDF - будут, но позже.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Tranzit

Eset получил серебро ?:D Неужели за столько лет они наконец поняли что без самозащиты никуда? А отключить его вирусам было легко и просто,что я и понял за 3 года использования продукции компании Eset. Да на днях попробовал отключить Ess через диспетчер задач и о чудо мне было отказано в доступе.Прогресс на лицо,однако разработчикам ещё работать и работать,поскольку методов отключения антивируса довольно много.А если eset научится ещё лечить активное заражение и удалять вредоносные файлы,драйверы и т.п то цены ему не будет. :rolleyes: Плохо только что с nod 32 проблему с самозащитой они не пытаются исправить.Естественно все силы брошены на флагманский продукт ESS.Ждём решения и для nod 32.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
так настройки продуктов были в умолчании или настраивались вручную? и если настраивались дополнительно, то все ли продукты?

Использовались настройки по умолчанию, ничего специально не настраивалось.

Как и говорил - гора золота) В тестировании 2010 методами 2006 года) Ни о чем. Результаты показывают не то что произошло совершенствование продуктов, а то что тесты устарели.

А что веб то процент потерял?smile.gif) Ну это смешно отнять у него процент за ядерный ZwTerminateProcess, учитывая вообще идиотизм присутствия ядерных API в тесте. Налицо несовершенство подходов и методов.

Я что-то не видел в теме о подготовке теста каких-то реальных предложений, дополнительных методах, утилитах и т.п. ZwTerminateProcess тоже обсудили, оставили две функции ядра для оценки динамики изменений. Да тот же прокол у DrWeb на этом методе ничего ровным счетом в результатах не поменял, все равно Платина. А багу поправят.

Плохо только что с nod 32 проблему с самозащитой они не пытаются исправить

Там все плохо как и раньше?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
slavik_dm

мдя.. вот кружка дёгтя в ложке меда...результат MSE - мягко говоря не радует..

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин

Да, еще хотел сразу сказать для разных недалеких людей, кто видит в результатах только то, что хочет увидеть. Мы специально не меняли методы теста с января 2009. Не меняли и схему награждения, которая актуальна еще больше - с 2007 года. Это я к тому, что любые разговоры о какой-то там заточке теста или тому подобное нужно воспринимать исключительно как отмазку и оправдания представителей вендоров своего бездействия на протяжении последних 1.5 года.

а что с 64bit OS? может вне конкурса можно минитест сделать для аутсайдеров?

Да, будет вне конкурса отдельным сравнением выложено.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
А почему для теста были выбраны продукты класса Internet Security?Мне были-бы интереснее результаты Антивируса Касперского 2011,и avast5 free.

Потому что мы стараемся и будем стараться тестировать именно Internet Security, так как "чистые антивирусы" у многих вендоров превращаются в продукты для бедных с минимально возможным функционалом, не обеспечивающим комплексную защиту. Да и большинство читателей просит тесты как раз Internet Security.

Что касается Антивируса Касперского 2011 и avast5 free, то результаты теста их самозащиты с очень большой долей вероятности будут такими же ;)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Liam
Да, будет вне конкурса отдельным сравнением выложено.

продукты эти же примут участие?

так на вскидку обновлено:

Avast! Internet Security 5.0.677

AVG Internet Security 9.0.851

BitDefender Internet Security 2011

ESET Smart Security 4.2.64.12

F-Secure Internet Security 2011

G DATA Internet Security 2011 (21.1.0.5)

Norton Internet Security 2011 (18.1.0.37)

Trend Micro Titanium Internet Security 2011

Outpost Security Suite 7.0.3 (3392.517.1242)

PC Tools Internet Security 2011 (8.0.0.605)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Danilka

Уже результаты опубликовали...

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Liam
Уже результаты опубликовали...

я имел ввиду х64

По этой ОС выложим отдельное сравнение в конце сентября, с писал ранее об этом в теме о подготовке теста. Мотивация - сильные отличия x64, лучше будет для первого раза рассмотреть ее отдельно. Первые результаты показали, что там все хуже будет.

к концу сентября можно было и обновить список продуктов

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Виталий Я.

Мы высказали обоснованные сомнения в итогах тестирования Outpost 7 на Windows 7. После 21 часа надеемся выработать общую позицию по этому вопросу.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Danilka
я имел ввиду х64

к концу сентября можно было и обновить список продуктов

Зачем? Интересно сравнить те, которые участвовали.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Liam
Зачем?

ну просто выглядит это ----> смотрите ребята чем вы пользовались...

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

  • Сообщения

    • Ego Dekker
    • ArktiTig
      Арктика - северная полярная область Земли, включающая окраины материков Евразии и Северной Америки, почти весь Северный Ледовитый океан с островами и прилегающие к нему части Атлантического и Тихого океанов. Название её происходит от греческого слова arctos (медведь) и связано со звёздами: Полярная звезда, находящаяся почти точно в зените над Северным полюсом, принадлежит к созвездию Малая Медведица.
    • ArktiTig
      Арктика - северная полярная область Земли, включающая окраины материков Евразии и Северной Америки, почти весь Северный Ледовитый океан с островами и прилегающие к нему части Атлантического и Тихого океанов. Название её происходит от греческого слова arctos (медведь) и связано со звёздами: Полярная звезда, находящаяся почти точно в зените над Северным полюсом, принадлежит к созвездию Малая Медведица.
    • PR55.RP55
      .xml  файлы taskschd.msc Могут быть подписаны  цифровой подписью. Думаю будет нелишним, если uVS будет это фиксировать. т.е. проверять не только подпись целевого файла, но и подпись самого файла\задачи. и писать в ИНфО .  
    • demkd
      ---------------------------------------------------------
       4.15.2
      ---------------------------------------------------------
       o Исправлена ошибка при работе с образом автозапуска.
         Для некоторых процессов команда unload не добавлялась в скрипт при нажатии кнопки "принять изменения".  o Добавлена плашка окна на таскбаре для окна удаленного рабочего стола.
         (при работе с удаленной системой) -----------------------------------------------------------
      Есть проблема с локализацией глюка в редких случаях приводящему к аварийному завершению uVS при активном флаге "Проверять весь HKCR".
      На основе дампов его найти не получается, нужна копия реестра системы с такой проблемой, если кому-то попадется такая проблема, то присылайте архив с копией реестра системы мне на почту.  
×