AV-comparatives.org: Performance Test Internet Security Suites August 2011

[Danilka 678]

http://www.av-comparatives.org/images/stor...ce_aug_2011.pdf

[Z.E.A. 190]

Занятно.

[Сергей Ильин 1538]

А чего никто не возмущается как же так AV-comparatives.org смешали в кучу все измерения и весьма странным образом к тому же? Или тесты этой лаборатории по дефолту "правильные"?

Не хорошо критиковать работу других, особенно коллег, но просто неправильно будет оставаться в стороне в данном случае.

Начало в отчете бодрое. Есть отдельные замеры:

1. копирования файлов + повторное

2. кодирования/декодирования музыкальных файлов

3. установки "нескольких программ" (каких точно не нашел)

4. даже измеряется открытие файлов Word и PDF

Для всех этих тестов выставляется оценка fast, very fast и т.п.

А потом самое интересное, рекомендую посмотреть отчет.

Как вам методика, все ОК?

Ну и на сладенькое, конечно, все кроме аутсайдеров маргиналов (Webroot, PC Tools) стали Advanced+ или Advanced.

[strat 275]

Я читал, тоже на это обратил внимание, но т.к. это настолько хреново сделанный тест, не несущий абсолютно никакой полезной информации, то даже не стал писать. Замерили бы место на диске которое занимает ав, толку было бы столько же, т.е. 0.

[Umnik 997]

Или тесты этой лаборатории по дефолту "правильные"?smile.gif

У теста даже название неверное. Думаю всем потому и было плевать и для всех он бесполезен.

[Danilka 678]

А чего никто не возмущается как же так AV-comparatives.org смешали в кучу все измерения и весьма странным образом к тому же? Или тесты этой лаборатории по дефолту "правильные"?

Где Олег?

[Сергей Ильин 1538]

У теста даже название неверное. Думаю всем потому и было плевать и для всех он бесполезен.

По самым скромным подсчетам этот "бесполезный" тест обошелся вендорам суммарно в несколько десятков тыс. зелени.

[Umnik 997]

Для вендоров-то в нем есть смысл. Для маркетинга, конечно.

[Сергей Ильин 1538]

Для вендоров-то в нем есть смысл. Для маркетинга, конечно.

Какой же, интересно? Все получили по Advanced(+) и поэтому рады?

[Umnik 997]

Ну так и сделают очередную новость "Бла-бла-бла высшую награду бла-бла-бла".

[strat 275]

По самым скромным подсчетам этот "бесполезный" тест обошелся вендорам суммарно в несколько десятков тыс. зелени.

Вот это уже интересно. А можно увидеть эти подсчеты, и вообще сколько за тесты платят то вендоры у этих и других тестеров?

[OlegAndr 236]

Суммарно - наверное. Все вендоры платят одинаковую сумму за участие в тесте. Т.к. участников много то суммы небольшие, к тому же тест идет как часть большой годичной программы тестирования

Да, измерение странное, результаты странные, методология странная, но не отказываться же от участия в тесте..

[Danilka 678]

но не отказываться же от участия в тесте..

А то MS не будет считать за антивирус.

[Сергей Ильин 1538]

Вот это уже интересно. А можно увидеть эти подсчеты, и вообще сколько за тесты платят то вендоры у этих и других тестеров?

Не буду голословным в указании точных цифр, но каждый вендор платит за тест (или за год ) точно не одну и не две тыс. зеленых, умножаем на количество участников и получаем бюджет тестирования.

Да, измерение странное, результаты странные, методология странная, но не отказываться же от участия в тесте..

К сожалению, это издержки бизнес-модели. Андреасу нужно не результаты выдать пользователям для ориентира, а угодить участникам теста. Отсюда почти все получают высокие награды. Система подсчета баллов/итогов при этом такое ощущение, что подгоняется как раз для того, чтобы все были хорошие. Это не только в этом тесте видно, я ранее уже про динамику тоже самое отмечал.

А то MS не будет считать за антивирус.

Даня, поясни, я видимо что-то не знаю Или это юмор такой?

[Danilka 678]

Даня, поясни, я видимо что-то не знаю Или это юмор такой?

А, ты наверно не в курсе. Тогда Олега процитирую:

По критериям Microsoft к антивирусу выставляются следующие требования:

a.If you are using your own antimalware engine, you must pass VB100 and meet at least one of the following:

• ICSA Labs - Pass

• West Coast Labs - Pass

• AV-Test.de – 90% or higher

• AV-Comparitives – 90% or higher

Зы. Доктор-то оказывается не антивирус-).

[strat 275]

Первый независимый Тест на длину названия.

Участники тестирования:

avast! Internet Security 6.0

AVG Internet Security 10.0

AVIRA Premium Security Suite 10.0

BitDefender Internet Security 2012 (RTM)

ESET Smart Security 4.2

F-Secure Internet Security 2011

G DATA Internet Security 2012

K7 TotalSecurity 11.1

Kaspersky Internet Security 2012

McAfee Internet Security 2011

Panda Internet Security 2012

PC Tools Internet Security 2011

Qihoo 360 2011

Sophos Endpoint Security 9.7

Symantec Norton Internet Security 2012 (RTM)

Trend Micro Titanium Internet Security 2012 (RTM)

Webroot Internet Security Complete 7.0

Во время теста мы применили математические и строковые функции пакета Microsoft excel, в частности стандартную функцию excel ДЛСТР.

Итоговые значения попадают в диапазон, как мы видим 14 - 43 символа.

Диапазон оценок:

больше 35 - very long

30-34 - long

20-29 - medium

меньше 20 - short

Исходя из влияния длины названия на мощность антивирусной защиты и весомость заявлений пиар службы достаточно очевидно предположение - чем длиннее пи-пи название, тем выше скорость работы, качество антивирусной защиты, больше денег в кошельке, меньше перхоти, рассасываются рубцы у юзеров, заряжаются кремы.

В настоящее время есть несколько тенденций в именовании продуктов.

1) Увеличение длины имени путем присоединения цифрового обозначения. Если раньше вендоры прибавляли к названию цифры 1 2 3.5 и т.д. то в настоящее время все отчетливее видна тенденция с присоединением обозначения года 2010 - 2011 -2012. В ближайшие почти 8000 лет возможности увеличения длины казалось бы, исчерпаны с применением этого способа, но посмотрите на аутсайдера, компанию Qihoo 360 2011. Они применили гибридный метод именования, что сразу дало прирост в 3 символа (4 считая с пробелами) но, к сожалению это пока не позволило выбиться даже в категорию standart.

2) Типичные способы включают в себя уже ставшие привычными термины "Internet security", что позволяет сразу прибавить 17 символов.

3) Некторые вендоры идут нестандартным путем, в активе их уникальные техники именования "Premium" и "Titanium", одна из которых по праву вывела в лидеры компанию Trend Micro.

4) К сожалению, некоторые вендоры по прежнему применяют устаревшие технологии, как то "Total" и "Smart". Собственно это и не дает уже ожидаемого эффекта. Ау, вендоры, на дворе 2011 год, третье тысячелетие!

Наши рекомендации пользователям - применяйте антивирусы с длинным названием, не меньше 30 символов. Надеемся, вендоры обратят внимание на данные тесты, а мы будем тщательно следить за новинками антивирусной индустрии и с нетерпением ожидаем супер мега комбайна с новейшими сверхсекретными технологиями "grand mega premium internet security 360 2012"

Кто же будет в лидерах? смотрите в следующих тестах!

По вопросам рекламы и оплаты тестов обсуждать в личке

п.с. Медальки мы еще не подготовили.

[A. 876]

Это прекрасно

[strat 275]

сам ржу.

кстати, никто не знает, почему в августовском тесте av-comparatives на медальках написано JUL 2011? Наверно очень сложный тест был, задержка результатов и комментариев вендоров, ах как это знакомо здешним юзерам

[Сергей Ильин 1538]

По критериям Microsoft к антивирусу выставляются следующие требования:

a.If you are using your own antimalware engine, you must pass VB100 and meet at least one of the following:

• ICSA Labs - Pass

• West Coast Labs - Pass

• AV-Test.de – 90% or higher

• AV-Comparitives – 90% or higher

Зы. Доктор-то оказывается не антивирус-).

Великолепно! Почти как оценка вредоносности по вирустотал

Надеемся, вендоры обратят внимание на данные тесты, а мы будем тщательно следить за новинками антивирусной индустрии и с нетерпением ожидаем супер мега комбайна с новейшими сверхсекретными технологиями "grand mega premium internet security 360 2012"

Кто же будет в лидерах? смотрите в следующих тестах!

По вопросам рекламы и оплаты тестов обсуждать в личке

Отличная инициатива и почти идеальный тест с точки зрения методологии!

[A. 876]

сам ржу.

кстати, никто не знает, почему в августовском тесте av-comparatives на медальках написано JUL 2011? Наверно очень сложный тест был, задержка результатов и комментариев вендоров, ах как это знакомо здешним юзерам

Тест проходил в июле, а выход результатов действительно пару раз переносился.

[Umnik 997]

strat

Ошибка в методе. Ты сравниваешь между собой IS и Total. Так что от ЛК должен был быть Pure. =)

[strat 275]

Согласен, методологию надо будет доработать , но в данном случае я взял список участников из августовского теста AV-comparatives.

[OlegAndr 236]

strat

Ошибка в методе. Ты сравниваешь между собой IS и Total. Так что от ЛК должен был быть Pure. =)

Мы обсудили этот тест с продуктовыми менеджерами, и пришли к выводу что надо улучшать продукты, поэтому к следующему тесту будем более готовы.

[wert 60]

К сожалению, это издержки бизнес-модели. Пацанам нужно не результаты выдать пользователям для ориентира, а угодить участникам теста. Отсюда почти все получают высокие награды. Система подсчета баллов/итогов при этом такое ощущение, что подгоняется как раз для того, чтобы все были хорошие. Это не только в этом тесте видно, я ранее уже про динамику тоже самое отмечал.

Даня, поясни, я видимо что-то не знаю Или это юмор такой?

Действительно, насколько проще угодить единственному пацану. И модели при делах и пацан счастлив.

Ну вот я бесконечно тупой.

Ну как так, что в ваших тестах постоянно касперский на первых местах, ну и иногда на вторых, а вот в других, признанных мировым сообществом, порой и часто просто он бесконечно сосёт.

Вот я даже не сомневаюсь, что они нашу расийскую сущность презирають, этакие потрохи.

[NOSS 130]

Вот я даже не сомневаюсь, что они нашу расийскую сущность презирають, этакие потрохи.

А почему нет? На спортивных соревнованиях очень часто незаслуженно засуживают, достаточно вспомнить проблемы с допингом и т.п...

P.S. Ну прямо анекдот: все призовые места в биатлоне заняли астматики норвежцы