Перейти к содержанию
Danilka

Тест проактивной антивирусной защиты III (результаты)

Recommended Posts

amcenter

Спасибо за тест, очень надеюсь, что и дальнейшие тесты будут объективными.

Тестирование наконец-то отметило снижение уровня эвристики антивируса Касперского, которое ну никак не хотели признавать.

Надеюсь, ЛК возьмется за улучшение качества своей продукции, особенно корпоративной...

Не ожидал такого хорошего результата у G data.

  • Upvote 10

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Danilka

Каждый из продуктов занял то место, которое и должен был занять. Претензий нет к результатам и методологии. Спасибо за тестирование.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Lias
Подписыватся не забываем, люди ЛК, сотрудик ЛК, КГБ, атаман войска...
Станиславский, ты?

а по теме - много думал по тестам, без комментариев

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
sww

Хотелось бы пройтись по комментариям партнеров.

Жутко порадовали Тренды.

...Trend Micro Internet Security 2010, где одной из главных защитных функций является блокирование глобальных источников распространения вредоносных программ и механизмы обратной связи

То есть, я правильно понимаю, что бан доменных имен - это одна из главных функций этого антивируса? Вы ребята мёду объелись?! Это всё, что у вас есть? Зараженные легитимные сайты вы тоже банить будете? Уверены, что большая часть доменов вообще до вас доходит? В курсе, что оно сейчас "мигрирует"? Спасибо, повеселили.

Максим из Агнитум порадовал меня еще больше. Виталий, объясни плз человеку, что он совсем не в теме. Сигнатуры сдохли! То, что вы пропустили сегодня, уже бесполезно детектировать завтра, но если хочется получить идиотский значок VB100, тогда всяко необходимо добавить всю эту мертвечину в базы.

Полезное из комментариев (я бы взял на заметку):

1) Мало сэмплов. Однако не забываем сколько трэша в коллекциях Маркса и Энгельса. Этого тут не нужно.

2) Использование динамического тестирования. AMTSO придумали как тестировать поведенческие блокираторы на реальной заразе в автоматическом режиме? И лучше не на VmWare. Гы.

И я так и не узнал про FP из инсталлеров с download.com. В них могут быть адвари.

P.S. Жду еще животрепещущих комментариев от партнеров. Eset, Symantec, ау?!

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин

Danilka, благодарю за оперативное создание темы ;)

Мой комментарий есть в отчете. Хотел бы еще раз отметить, что к большему сожалению никто в этот раз не получил высоких наград. Нет платины (еще ни разу в истории не было), нет и золота. Рубеж 60% взят, но явно за счет фалсов. Создается впечалетние, что аккуратно уже становится просто нереально докручивать эвристику. Один F-Secure чего стоит! Когда увидел его резуальтат сначала, то был крайне удивлен, но проверка на ложные срабатывания все поставила на места.

Настораживает сильное снижение проактивного детекта у Eset и Dr.Web. Причины явления не ясны.

e3_5.png

Очень интересная картина по общему детекту с обновленными базами.

e3_61.png

Можно поздравить Trend Micro и Agnitum с резким улучшением результата!

Да и еще один факт, который не попал в отчет. Мы с Гришей специально проверили как изменится общий детект если подключить интернет, т.е. включить в работу те самые облака. Что мы получили? Мы получили копеечный прирост, буквально с десяток самплов и все. Даже неинтересно было отражать это в отчете.

P.S. Большое спасибо Грише за непосредственное проведение теста. Несмотря на его кажущуюся простоту, тест коварный с множеством подводный камней. Также благодарю всех, кто принимал участие в подготовительном обсуждении теста и выборе продуктов для тестирования.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Виталий Я.
Максим из Агнитум порадовал меня еще больше. Виталий, объясни плз человеку, что он совсем не в теме. Сигнатуры сдохли! То, что вы пропустили сегодня, уже бесполезно детектировать завтра, но если хочется получить идиотский значок VB100, тогда всяко необходимо добавить всю эту мертвечину в базы.

Знаешь, горизонт разумности эвристического детектирования наших движков - не 6 недель, а 1-2 недели. Ну не предназначен антивирус для простаивания без апдейтов. Поэтому ничего иного, кроме как ткнуть фразой "да ну эту вашу эвристику", не захотелось. On-access у нас много еще чего наловит бессигнатурно и поможет почистить, а смысл тогда в этом тесте с невнятным кол-вом сэмплов? Так, поразоряться на этот счет.

Про VB100 - речь шла о RAP-тесте с 12000 новых сэмплов на каждую из 4 недель, лишь 1 из которых "проактивная". Там значка не дают, только процент, а помещают продукт на диаграмму "Reactive vs Proactive".

PS: Слава, тальк "Никсон" настолько хорош, что его даже крадут? ;)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
sww
Знаешь, горизонт разумности эвристического детектирования наших движков - не 6 недель, а 1-2 недели.

Хорошо будет если эвристика хотя бы день-два проработает. Не работает оно 1-2 недели, не надо.

В любом случае гнать про сигнатуры - это глупо в высшей степени и нелепая отмаза. Говорить про количество сэмплов вдвойне глупо. Если у вас на таком кол-ве такой результат, то на 12.000 будет еще хуже :)

PS: Слава, тальк "Никсон" настолько хорош, что его даже крадут? ;)

Щито?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Виталий Я.

Откуда пафос такой? (Народ, кнопка "жалоба" на первые 2 поста не работает).

PS: Итоговая VB100-шная RAP-диаграмма по Agnitum верна только для правой точки. Левая - "левая" :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Umnik
Наибольшее ухудшение общего уровня обнаружения отмечено у продуктов Norton, Eset и F-Secure (за счет смены у F-Secure лицензируемого антивирусного движка).

Стоило указать это как предположение. Может там другая причина? Ну, например что-то сломали в логике и часть событий просто пролетают мимо продукта.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Виталий Я.
Говорить про количество сэмплов вдвойне глупо. Если у вас на таком кол-ве такой результат, то на 12.000 будет еще хуже :)

Щито? На 12.000 в неделю он - лучше ;)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
Стоило указать это как предположение. Может там другая причина? Ну, например что-то сломали в логике и часть событий просто пролетают мимо продукта.

В прошлом тесте они были на уровне каспера по общему детекту, а сейчас круто упали. Может что-то сломали, но в любому случае изменения результатов связано со сменой движка и его последствиями.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
sww
Щито? На 12.000 в неделю он - лучше ;)

Это тебе кажется :) Да и не доверяю я организаторам VB100, руки у них кривые, неизвестно какие там сэмплы.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
anip
Да и еще один факт, который не попал в отчет. Мы с Гришей специально проверили как изменится общий детект если подключить интернет, т.е. включить в работу те самые облака. Что мы получили? Мы получили копеечный прирост, буквально с десяток самплов и все. Даже неинтересно было отражать это в отчете.

Всегда считал, что "облака", мягко выражаясь, фуфло, пиар. Да ещё если учесть, что у массы пользователей нет и-нета или скорость 56-128 кбит/сек...

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
Да ещё если учесть, что у массы пользователей нет и-нета или скорость 56-128 кбит/сек...

Ну тут как раз не так важно, подсасывает антивирус не много, проводили тут ранее на форуме данные. Но вот что реально для юзера прирост небольшой на сравнительно свежей коллекции, вот это удивляет со знаком минус. Получается, что облака пока используются для накачки классического детекта, а полноценной репутационной защиты в режиме онлайн пока нет.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Danilka

Сергей Ильин

Да она и не особо нужна в наших реалиях. ;)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Rampant
Может что-то сломали, но в любому случае изменения результатов связано со сменой движка и его последствиями.

Дык эвристик BitDefender показал лучший результат чем Касперский, где логика?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
UIT

Сергей Ильин, управляющий партнер Anti-Malware.ru:

...Во-первых, вендоры массово занялись «облачными» и поведенческими технологиями, сделав ставку на связанную с ними быстроту обеспечение детекта. Этот подход, с моей точки зрения, является действительно более перспективным в силу целого ряда причин, поэтому в ближайшие годы нас ожидает некоторая эволюция самого понятия проактивности».

Ох, пожалуй надо переезжать тогда, ммм, в Японию:) Ибо эти самые облака в моих настоящих условиях будут летать у меня медленно-медленно и рывками:)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
Ибо эти самые облака в моих настоящих условиях будут летать у меня медленно-медленно и рывками:)

Неправда ваша. Например, передать md5 на сервер и получить в ответ несколько байт ответа (да или нет) - это не страшно. Оффтоп, но почитайте обзор Trend Micro OfficeScan 10, там достаточно подробно расписано как это работает на живом корпоративном продукте. А с персональными вообще париться по поводу загрузки канала не стоит. Вам классический антивирус качает апдейты мегабайтами и так ;)

Могу добавить, что пока тесты показывают, что облачный детект (именно о детекте говорю) не работает так, как этого ожидают. Нужно менять очень многое, чтобы это заработало на полную, а это годы вложений в инфраструктуру, разработку технологий хранения и обработки накопленных данных + нужно менять конечные продукты тоже. С последним самая запарка, так как даже по комментариям в этой теме видно, что клиенты мягко говоря не готовы. Тот же Trend Micro не отказывается от сигнатур, они продолжают и будут продолжать таскаться с самими продуктами, но базы делаются более компактными и это уже факт.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
wert
Но вот что реально для юзера прирост небольшой на сравнительно свежей коллекции, вот это удивляет со знаком минус. Получается, что облака пока используются для накачки классического детекта, а полноценной репутационной защиты в режиме онлайн пока нет.

Насколько я знаю, например, для Norton использование сканирования по требованию для некоторых типов облачных детектов бессмысленно.

Эти детекты срабатывают только on-access на новые файлы.

Антивирусы становятся разными и даже тестеры не знают, что и как тестировать. ;)

Время тестирования отдельных компонентов уже прошло.

Технического смысла нет.

Нужны только комплексные тесты.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Dr.Golova
Получается, что облака пока используются для накачки классического детекта

Не детектом единым - облако еще фалсы правит :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
GReY
Получается, что облака пока используются для накачки классического детекта, а полноценной репутационной защиты в режиме онлайн пока нет.

естесственно, а кто-то ожидал иного? :)

изменения результатов связано со сменой движка

они его поменяли? на что?

облако еще фалсы правит

кажется, пока даже наоборот - плодит

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Lias

Неправда ваша. Например, передать md5 на сервер и получить в ответ несколько байт ответа (да или нет) - это не страшно.
а если тупо нет инета? В смысле был - и пропал! Облака нету

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
а если тупо нет инета? В смысле был - и пропал! Облака нету

Сигнатуры никто не отменяет, они есть и будут. Облако нужно для более оперативной реакции.

естесственно, а кто-то ожидал иного? smile.gif

Ну постепенно к этому все равно придут, просто не так быстро видимо.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Rampant
они его поменяли? на что?

наверно подразумевается смена движка ЛК, на технологии BitDefender, но если посмотреть архив наград, результаты F-Secure до 2010 года, были ещё хуже)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

  • Сообщения

    • Ego Dekker
      Антивирусы для macOS были обновлены до версии 6.10.700.
    • ForetFR
      CLIMB Hearsay from Earth - https://mebonus.ru
      Google №Wet

      Palestinians scoot as Israel bombards haunts from style, swell and sod!!!

      Google Hearsay

      People in Gaza fled their homes carrying crying children and valued possessions as Israeli forces pounded the vicinage from aura, adrift and land on Friday.
      The escalating controversy triggered furious protests in the occupied West Bank, where seven Palestinians were killed by way of Israeli army fire, and moreover fury between Arabs and Jews in Israel.
      Hamas praised the clashes between stone-throwing youths and Israeli soldiers in the West Bank grevorgАЛИdVhower , m‚tier on Palestinians to “set the ground ablaze under the feet of the rule”.
      Google RUMOUR - Wet
      In a meritorious escalation in the worst bout of fighting between Israel and Hamas looking for seven years, oppressive artillery fire was aimed at what the Israeli military said was a hefty network of fighter tunnels. Dozens of Hamas operatives were killed in the strikes, the Israel Apologia Forces (IDF) said.
      Palestinian protesters burn tyres and throw stones at Israeli forces in the West Bank community of Nablus

      There was gallimaufry overnight after the IDF corrected an earlier communiqu‚ saying that base troops were “currently attacking in the Gaza Strip”. A blemished proclamation clarified that there was no excuse sediment aggression, but artillery and tank vivacity from the border. “Clarification: there are currently no IDF establish troops reversed the Gaza Strip. IDF current and area forces are carrying out strikes on targets in the Gaza Strip,” it said.
      What is the current Israel-Gaza turning-point far and where is it heading?
      Deliver assign to more - GOOD COPY - in cak

      Analysts suggested it was a purposeful ploy intended to onwards elder Hamas figures to split for into a network of hidden tunnels known as “the metro”. Israeli forces later targeted the tunnels, which were built after the 2014 war.
      An IDF asseveration said 160 aircraft had “struck over 150 subterranean targets in the northern Gaza Shed one's clothes” overnight. Israel’s forces destroyed “many kilometres” of the tunnels during the assail, it claimed.
      A multi-storey building casing a bank affiliated with Hamas was destroyed, and weapons opus and naval sites were also smash, it said.

      Palestinians living in areas closed to the Gaza-Israel frieze fled their homes in pickup trucks, on donkeys and on foot. Some went to UN-run schools in Gaza Urban district, carrying small children, household essentials and food.
      Hedaia Maarouf, who left-wing her serene with her extended kinfolk of 19 people, including 13 children, said: “We were terrified instead of our children, who were screaming and shaking.”
      A Palestinian kindred flees their home in Beit Lahya in the northern Gaza Strip?
      In northern Gaza, Rafat Tanani, his having a bun in the oven strife and four children were killed after an Israeli warplane reduced a building to rubble, residents said.
      Bill - Matt Gaetz associate pleads contrite to sexual congress trafficking crimes – US manipulation animate Bouts

      The death chime in Gaza rose to over and above 120, with a dressy increase in the number of people injured in the overnight onslaught, according to the Gaza health ministry. At least 31 children bear been killed.
      Hospitals that were already struggling to wine patients with Covid received an influx of people with shrapnel wounds and other injuries. Some needed amputations. “All I can do is beseech,” said one hospital director.
      The UN said more than 200 homes and 24 schools in Gaza had been destroyed or severely damaged in Israeli bearing raids in the lifestyle five days. It also said residents’ access to inexperienced spa water could be limited because of power cuts and harm to pipe networks.
      Increased power blackouts are expected as nuclear fuel supplies off low. Most families already exclusively have power in regard to four or five hours a daylight, and hospitals are stiff to rely on generators.

      Hamas and other militant groups continued to fusillade rockets into Israel, where example sirens sounded in towns and communities. The Israeli military said it had intercepted at least five drones carrying explosives launched from Gaza since Thursday.
      Read more Scandal - HEARSAY - in Wet

      Statistic Tidings Front-page news
      http://mebonus.ru - Front-page news of Googles
    • кустомер
      Всем здравствуйте. СРАЗУ оговорка:
      Кнопка "Создать новую тему" только на главной странице форума.
      В выпадающем её меню НЕактивны абсолютно все разделы кроме этого.
      Тему разместить хотелось-бы в другом разделе.
      Ответ на тот вопрос ― наверное поэтому.
      Собственно по делу -
      У кого из считающих себя "мастером_своего_дела" могло-бы появиться желание
      подумать и высказать своё предположение метода проникновения файла сценария
      с печеньями (cookies) после того, как весь IP-диапазон адреса хранения файла
      был заблокирован в настройках Outpost, отлично справляющегося по сей день
      с блокировкой ЛЮБЫХ других (кроме этого) IP-диапазонов? Адрес(имя) файла:
      https://mc.yandex.ru/metrika/watch.js Outpost навскидку можно сравнить с другими продуктами защиты - там.

      Вопросы типа "а-зачем-вам-это-надо" будут
      расценены как флуд, отвлекающий от темы. (уважаэмым модераторам)
      Тема относится к способу проникновения этой заразы, а не к конкретному продукту защиты.
    • demkd
      на него уже давно не реагируют они сейчас самый опасный report_crash что дампы отправляет  
    • akoK
×