AV-TEST Product Review and Certification Report - 2011/Q2

[Danilka 678]

http://www.av-test.org/certifications?orde...esc〈=en

KIS 2012 подтянулся, респект!

[Сергей Ильин 1538]

Интересно, что у Маркса по юзабилити лидирует BitDefender и Eset. А Symantec, McAfee и AVG - неудобное УГ.

Кэп?

[Zilla 340]

Сергей Ильин

Т.е. KIS должен быть лидером? А здесь все так же.

[Danilka 678]

Интересно, что у Маркса по юзабилити лидирует BitDefender и Eset. А Symantec, McAfee и AVG - неудобное УГ.

Кэп?

Эммм:

The "Usability" testing includes the system slow-down caused by the tools and the number of false positives.

[Valery Ledovskoy 1082]

BitDefender и Eset. А Symantec, McAfee и AVG

Т.е. KIS должен быть лидером? biggrin.gif А здесь все так же.

Zilla, Сергей Ильин вроде как не упоминал KIS. Видимо, это у Вас какая-то остаточная индукция сохранилась

[Сергей Ильин 1538]

The "Usability" testing includes the system slow-down caused by the tools and the number of false positives.

Usability ... system slow-down. Посчитали бы там еще за одно и качество техподдержки еще

Т.е. KIS должен быть лидером? biggrin.gif А здесь все так же.

Я что-то писал про KIS???

[Danilka 678]

Usability ... system slow-down. Посчитали бы там еще за одно и качество техподдержки еще

Угу, весьма странное название.

[OlegAndr 236]

Не хочет он почему-то слово перформанс использовать. Не зна. Но результаты милые, сам радуюсь.

[Сергей Ильин 1538]

Не хочет он почему-то слово перформанс использовать.

На счет Performance, тут двояко, я понимаю мотивы Андреаса. Одни под этим понимают производительность в смысле быстродействия и ресурсоемкости (как мы например), а другие под этим понимают производительность в смысле эффективности защиты. Вот и выходит, что термин нежелательный для использования без пояснений.

[Viktor 669]

Енто ж как он смог усреднить перфоманс KIS 2011 и KIS 2012?!

[GReY 35]

Забавно видеть, как продукт с Real World показателем 97/98/100 (PC Tools) и 100% блокированием зарабатывает оценку 4 из 6 за предотвращение на основании того, что задетектил "лишь" 93/97/98 процентов из 424 тысяч файлов, отобранных кем-то за два-три месяца.

Особенно на фоне 100%-ных детектов у BitDefender

[rodocop 158]

Мне вот другое забавно: имея 2 балла за Protection можно получить сертификат, при том, что другому и с 4 баллами сертификата не дадут :-)

И это тест ЗАЩИТНОГО софта...

[GReY 35]

Точно, по лечению оценки тоже странны - Комодо, к примеру, налечил от силы на полбалла

[Сергей Ильин 1538]

Ну скажем Comodo и у нас в новом тесте налечил на 1 (единицу по пятибальной шкале), лечение явно не сильная сторона данного продукта.

А вот как у Адреаса Avira и G Data налечили на 4 и 4.5 - вот это ОЧЕНЬ большой вопрос! Любит он немцев безумно ... А лечение Panda на 5.0 так вообще за грани безумия. Ладно, посмотрите наши результаты, сравните.

[Killer 55]

По мне самый важный показатель этого теста - именно блокирование. Потому что, на мой взгляд, в боевых условиях, еще реально блокировать атаку. Ну или частично разрушить ее, и таким образом, свести к нулю. А вот именно лечение или обнаружение(ну по базе) - тема весьма спорная. Потому что есть зеродеи. И шанс с ними справиться - именно на хипсе, тоесть блокировка...

Опять же, на эту тему можно много спорить, но это мое ИМХО.

[GReY 35]

посмотрите наши результаты, сравните

дык вроде выяснили уже, что вы тестируете самых злостных зловредов, прячущихся и сопротивляющихся, а остальные - всё подряд. отсюда и разница в результатах. или их результаты по deliberately hidden тоже сильно расходятся с вашими?

[Сергей Ильин 1538]

или их результаты по deliberately hidden тоже сильно расходятся с вашими?

Конечно расходятся! Там у Avira и Panda - 83% удаление deliberately hidden (из 18 самплов). У нас 35% и 29% соответственно. Есть разница?

[GReY 35]

83% удаление deliberately hidden

56 у Panda и 61 у Avira

примерно в два раза больше вашего

[Сергей Ильин 1538]

56 у Panda и 61 у Avira

примерно в два раза больше вашего

Сорри, не в ту графу посмотрел, спасибо за уточнение. Да, намного больше нашего получилось, что весьма настораживает.

[Виталий Я. 859]

Мне вот другое забавно: имея 2 балла за Protection можно получить сертификат, при том, что другому и с 4 баллами сертификата не дадут :-)

И это тест ЗАЩИТНОГО софта...

В PCMag та же фигня - в тесте ZoneAlarm "уды" и "неуды" хватает по половине пунктов, а на выходе - "4 из 5". Крутые перцы ходят на конференции имени Евгения Валентиновича и Питера Нортона

[sbelow 120]

Да, намного больше нашего получилось, что весьма настораживает

Я конечно не против, что "наши" тесты "самые" объективные.

Ну если серьезно, то почему разница такая?

С чем, с кем связано? Причины в чем?

[Сергей Ильин 1538]

Ну если серьезно, то почему разница такая?

С чем, с кем связано? Причины в чем?

Не хочу бросать помидоры в коллег по цеху, но все же дело в принципиальном выборе самплов. Например, в нескольких сложных самплах из нашего теста некоторые вендоры (из Германии и Испании, например ) предпочитают не видеть ничего вредоносного. Куча писем в суппорт, а результат один - ничего вредоносного необнаружено. Ну не понимают люди, что они видят, не говоря уже про написание процедуры лечения. Поэтому таких самплов просто не может быть в тестах у AV-TEST. Думаю, что понятно почему.

[MORDRED 80]

Куча писем в суппорт, а результат один - ничего вредоносного необнаружено.

Тоже сталкивался с такой ситуацией, с вендорами AVG и BitDefender. Общаться с AVG, это из раздела - я плакалъ.

[GReY 35]

намного больше нашего получилось, что весьма настораживает.

абсолютное значение ничего не значит, а вот относительные было бы интересно сравнить... когда уже ваши результаты опубликуют?

[Сергей Ильин 1538]

абсолютное значение ничего не значит, а вот относительные было бы интересно сравнить... когда уже ваши результаты опубликуют?

Постараемся через несколько дней буквально все выложить, т.е. до конца недели.