Retrospective/ProActive Test (May 2007) - Тесты и сравнения - Форумы Anti-Malware.ru Перейти к содержанию
vaber

Retrospective/ProActive Test (May 2007)

Recommended Posts

vaber

На av-comparatives.org Клементи выложил результаты долгожданного теста эвристиков антивирусов.

Ознакомиться с тестом можно по этой ссылке:

http://www.av-comparatives.org/

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Storm

1) Мягко говоря очень странный тест. Клементи мог бы взять версию КАВа поновее.

2) Кстати, представители Доктор Веба, плз, посмотрите в той версии движка, которую тестил Клементи добавлен движок origin'ов? Если нет, то это тожен очень странно.

3) Кстати в случае с Авирой, пришли к моей точке зрения. Не важно как производится детект, главное чтобы он на нормальные файлы не ругался. :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Valery Ledovskoy
представители Доктор Веба, плз, посмотрите в той версии движка, которую тестил Клементи добавлен движок origin'ов?

Origin в 4.44, так что не тестировался он здесь.

Да, очень несвоевременный тест, лучше бы после выхода 7 и 4.44.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Dmitry Perets

Мда... С одной стороны, конечно, Клементи тестирует релизы, в этом есть свой смысл - это именно то, что пользователь может в данный момент использовать. Но с другой стороны, немного обидно, что ждать следующих результатов придётся ещё полгода... Разве что в виде пресс-релизов выпустят результаты.

Кстати, обратите внимание на результат НОДа. Эмулятор жил, эмулятор жив, эмулятор будет жить? =)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
vaber

Вероятно, на тот момент когда началось тестирование - 6.0.2.614 была последней.

Придется еще полгода ждать до теста семерки и Каспа и 4.44 Доктора (а может и 5? :) )

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Иван

хей хо, вот все таки хорошо быть внимательным читателем:)

если на вышеозначенном сайте чуть ниже спуститься, то можно увидеть надпись

Kaspersky Anti-Virus 7.0 (proactive test) June 2007 coming soon (6/20/2007)

т.е. ждать теста эвристики семерки я так понимаю не долго, хотя нет долговато все же

давайте делать ставки сколько эвристик семерки возьмет:)

по личным ощущениям, если он должен быть лучше макафи, симантека и доктора версии 4.33...но с настройками по умолчанию корифеев эвристики конечно пока не умоет

так взглянем сколько там у перчисленной троицы...

ага, лично я думаю этот первый вариант нового эвристика касперского возьмет 35-40% на климентьевской коллеции.

Добавлено спустя 4 минуты 44 секунды:

что касается авиры, то да фолсит конечно, но заметьте Storm, Доктор детектящий пакеры честно фолсит вдвое больше авиры

а еще я не понял как в табличке по фолсам F-Secure аж в двух местах оказалась:)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
vaber
ага, лично я думаю этот первый вариант нового эвристика касперского возьмет 35-40% на климентьевской коллеции.

Я на форуме выкладывал результат проверки эмулятора семерки на 400-от с чем-то образцах - там и был результат 35-40 и он вероятно подтвердится (если модули эмулятора не обновятся и не улучшатся существенно).

Что касается результата победителей - 71 (68), то такого резульата от эвристика Каспера ждать не приходится - эвристики-то разные по существу (основной детект авиры, нода и т.п. - сигнатуры (маски) по определенному классу малвар).

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Иван

мне как пользователю принцип работы не очень важен. важно чтоб брал много и не фолсил при этом

с выходом эвритики касперский для меня еще больше стал подходить под это определение, для меня

35%-40% эвристика + проактивка (поведенчекий блокиратор) + +скорость реакции 0-2 часа

ни чем не хуже, чем

70% эвристика + 0 + скорость реакции 4-6 часов

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
DWState

Согласен с Иваном. Эвристик и проактивная защита были и думаю будут пока только вторичным инструментом в борьбе со зловредами. Минусы их - это ложные срабатывания, невозможность лечения. Это всегда "Что-то нашел" или "Что-то там есть" и думай потом что там и с чем его есть. Но без нее тоже никуда.

Добавлено спустя 5 минут 7 секунд:

ИванА у меня вопрос, я его где-то уже подымал. А как проверить эвристик у 7 каспера, только при этом ФА чтоб был отключен, ведь его эвристик находится в том же модуле и отключая одно отключается и другое, или в противном случае все начинает ловится ФА, если конечно только не подобрать колекцию которая не входит в базу касперского.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Иван

можно как это делает клименти например. взять продукт со старыми базами и вирье которое появилось после того как базы перстали обновляться

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
DWState

АГА...а если как вариант взять допустим КAV7nb (NoBase) и им, хотя как вариант может отказаться функционирать. А сам сабж в силу своей новизны будет иметь достаточно новые базы по умолчанию, например последних Техрелиз 7ки с базами от 30 мая вроде

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Иван

видимо 20е число наступило досрочно, клименти повесил тест эвристика семеры

35% детекта и 1 фолс

kav7.pdf

kav7.pdf

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
grnic

на самом деле, фолсов эвристик не добавил, т.к. это тот же самый сигнатурный фолс, который был и при тестировании 6.0

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Dexter

Идеальный эвристик? :shock:

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Dmitry Perets
Идеальный эвристик? :shock:

Неее, вот если б процент детекта был 99+...=)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Dexter

Ну это было б слишком круто и совсем смешно. :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Dmitry Perets
Ну это было б слишком круто и совсем смешно. :)

Зато идеально! =)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Dexter

Для эвристика или подбора образцов? :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Иван
на самом деле, фолсов эвристик не добавил, т.к. это тот же самый сигнатурный фолс, который был и при тестировании 6.0

а у нода 32 - 2 фолса эвристиком

эвристик каспреского в тесте вообще не фолсил с настройкми по умолчанию. А как известно в 7.0 у эвристика несколько уровней параноидальности, по умолчанию стоит слабенький, чтоб нефолсил. Если бы на фолсы наплевали и задрали уровень эвристики по умолчанию выше - я бы еще поглядел чей эвристик веселее.

Добавлено спустя 1 минуту 4 секунды:

Для эвристика или подбора образцов? :)

фолсы доктора не по вкусу?

_____.JPG

post-10-1180764750.jpg

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Dexter
фолсы доктора не по вкусу?

А каким боком в текущем контексте доктор?

P.S. Кстати, мой личный опыт не сильно противоречит этому тесту. Это естественно касается тех ав, которые я немного знаю. И уровень фолсов доктора лично мне близок. :)

Меня просто умиляют и смешат цифры 0-0,1% и 99,9-100%. Это обычно говорит о проблемах в подборе образцов.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
ordon

Кстати об образцах. Никто не нашёл ни одного из 13 зловредов в категории OtherOS malware...

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Dmitry Perets
А как известно в 7.0 у эвристика несколько уровней параноидальности, по умолчанию стоит слабенький, чтоб нефолсил. Если бы на фолсы наплевали и задрали уровень эвристики по умолчанию выше - я бы еще поглядел чей эвристик веселее.

Нет, Иван, там на максимуме стояли настройки эвристика КАВ 7. Посмотрите в таблицу с результатами, там есть пункт "Heuristic Level".

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Иван

А ну да, согласен. выдал желаемое за действительное. НО собственно и у остальных выставлены бест посибл детекшен сеттингз

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

  • Сообщения

    • Ego Dekker
      Домашние антивирусы для Windows были обновлены до версии 19.2.10.
    • PR55.RP55
      1) Ситуация когда нет доступа к virustotal.com ( и другим ресурсам ) Что предлагаю: а) На примере Firefox 155 - Happy Eyeballs v3: подключение сразу несколькими путями *Браузер больше не выбирает маршрут до сайта заранее, а пробует несколько вариантов подключения параллельно и работает через тот, который отозвался первым. Выигрыш заметнее всего в сетях, где IPv4 или IPv6 работает медленно либо нестабильно: раньше браузер мог упереться в неотвечающий адрес и ждать таймаута, теперь соединение уходит по резервному пути без паузы. б) Если сайт полностью не доступен - то, при потоковой проверке файлов не заставлять пользователя "бесконечно" ждать... 2) Драйвер фаервола - при проверке. По хорошему программа сама должна знать какие файлы её, какие нет и всякий раз не лезть к ним и не пытаться получить доступ к собственному файлу ?  
    • AM_Bot
      «Инфосистемы Джет» активно развивает концепцию антихрупкости. Эта компания разработала инструменты для её практического применения — первый Фреймворк антихрупкой ИТ-архитектуры и Индекс антихрупкости для построения киберустойчивого бизнеса.      1. Введение2. Что такое антихрупкость ИТ-архитектуры3. Назначение инструментов, разработанных компанией «Инфосистемы Джет»3.1. Фреймворк антихрупкой ИТ-архитектуры3.2. Индекс антихрупкости4. Как проходит оценка4.1. Заполнение профиля компании4.2. Построение бенчмарка4.3. Прохождение опроса4.4. Оценка результатов5. ВыводыВведениеРезонансные атаки на крупнейшие российские компании, которые мы регулярно освещаем, вскрыли системную проблему: реальная операционная готовность к инцидентам остаётся на низком уровне, даже если система защиты формально выстроена. Как показало недавнее исследование компании «Инфосистемы Джет», пережить кибератаку не готовы 64 % из 50 российских компаний. Хуже всего ситуация обстоит в госсекторе и ритейле — при этом именно эти отрасли входят в число наиболее атакуемых.Защита, которая создавалась, чтобы остановить злоумышленника, теперь может лишь его замедлить — и одной способности «не пустить» стало недостаточно. Закупленные СЗИ создают иллюзию надёжности: организация выглядит защищённой, но в момент реальной атаки оказывается уязвимой.В условиях массовых взломов и эволюции атакующих стратегий на первое место выходит принцип управляемого ухудшения ситуации. Взлом с большой вероятностью произойдёт, но мы должны уметь работать под атакой, управлять кризисом и быстро восстановиться. Также необходимо выстроить зрелые процессы реагирования на угрозы, восстановления после инцидентов и обеспечения непрерывности бизнеса даже в условиях атаки. В ответ на этот вызов ИТ-компания «Инфосистемы Джет», работающая на российском рынке с 1991 года, предложила использовать концепцию антихрупкой ИТ-архитектуры.Её суть заключается в том, что ИТ-инфраструктура должна не просто выдерживать сбои, атаки и неблагоприятные обстоятельства, а по-настоящему быть к ним готовой, эффективно их преодолевать и даже извлекать из них пользу, становясь надёжнее и укрепляя свои позиции среди конкурентов.Что такое антихрупкость ИТ-архитектурыКонцепция антихрупкости впервые была предложена учёным Нассимом Талебом, статистиком, бывшим трейдером и риск-менеджером, который прославился изучением влияния случайных и непредсказуемых событий на мировую экономику и биржевую торговлю. В книге «Чёрный лебедь. Под знаком непредсказуемости» (The Black Swan), вышедшей в 2007 году, он ввёл сам термин «чёрный лебедь» для описания редких и маловероятных событий, имеющих огромные последствия, и пришёл к выводу, что вместо попыток их предсказания логичнее создавать системы, способные не просто пережить хаос, но и становиться после него сильнее. Именно это понимание легло в основу идеи антихрупкости, которая уже была детально раскрыта Талебом в книге 2012 года «Антихрупкость. Как извлечь выгоду из хаоса» (Antifragile: Things That Gain From Disorder).Вдохновившись концепцией антихрупкости, аналитики компании «Инфосистемы Джет» решили развивать эти идеи и продвигать их в России. Антихрупкая ИТ-архитектура — не гонка за новыми инструментами. Она строится вокруг способности пережить полный жизненный цикл атаки: подготовиться к ней, замедлить злоумышленника, обнаружить вторжение, сократить ущерб, восстановить бизнес и перестроиться после инцидента. Для практической реализации концепции антихрупкости «Инфосистемы Джет» разработали первый Фреймворк антихрупкой архитектуры и Индекс антихрупкости, позволяющие выявить слабые места и сформировать дорожную карту усиления защиты.Назначение инструментов, разработанных компанией «Инфосистемы Джет»Как же перейти от понимания концепции антихрупкости к её реализации? В этом помогут разработанные вендором инструменты, которые мы рассмотрим ниже.Фреймворк антихрупкой ИТ-архитектурыФреймворк антихрупкой ИТ-архитектуры представляет собой открытый и практичный инструмент, который объединил опыт инженеров, аудиторов, консультантов и экспертов-практиков по защите сети и построению ИТ-инфраструктуры. Он разработан командой «Инфосистемы Джет» во главе с руководителем отдела развития консалтинга по ИБ Александром Морковчиным.Сценарии использования фреймворка охватывают три ключевые рыночные потребности. Первая — оценка текущего уровня киберустойчивости с помощью единой измеримой «линейки» для сопоставления с конкурентами и отраслевыми лидерами. Вторая — планирование развития на основе каталога проверенных практик и выбор вектора роста. Третья — трансформация: пошаговый переход от фактического состояния к целевому уровню киберустойчивости. Фреймворк имеет иерархическую логику: он строится по каскадной модели «в крупную клетку», т. е. на высоком уровне абстракции, без погружения в мелкие детали. Всего существует пять уровней детализации, где каждый следующий уровень конкретизирует предыдущий. Это позволяет последовательно двигаться от общего видения (стратегии) по уровням детализации к конкретным действиям (практике), сохраняя гибкость и системность.Фреймворк доступен на официальном сайте и не требует установки дополнительных расширений. Рисунок 1. Каскадная модель фреймворка антихрупкой ИТ-архитектуры Разберём каскад по уровням:Уровень 0. ДистанцииДистанции описывают фазы жизненного цикла относительно кибервторжения.Уровень 1. Цели («Чего хотим достичь»)Здесь выделяется семь стратегий. Это верхнеуровневые направления для достижения антихрупкости: например, «подготовка и прогнозирование», «адаптация и перестройка». Их цель — сформировать киберустойчивый каркас, дополнив классическую ИБ тем, чего часто не хватает в реальной атаке: связью с ИТ-архитектурой, непрерывностью, восстановлением, кризисным управлением и постоянным улучшением. Таблица 1. Семь стратегий антихрупкостиСтратегияВопрос, на который она отвечаетСистемное развитие и контрольРазвивается ли ИБ оправданно с точки зрения бизнеса?Подготовка и прогнозированиеПонимаем ли мы, как нас будут атаковать и какое звено сломается первым?Вовлечение и нападениеЗнаем ли мы, кто и как готовится нас атаковать — и можем ли перехватить инициативу?Защита, замедление, сдерживаниеЧто не даст атакующему быстро развить успех после проникновения?Обнаружение и реагированиеПоймём ли мы, что враг уже внутри, до того как он ударит?ВосстановлениеЕсть ли у бизнеса «План Б» на случай потери инфраструктуры?Адаптация и перестройкаСтанет ли компания сильнее после инцидента? Уровень 2. Правила реализации («Как себя ведём»)Здесь выделяется 10 принципов. Принципы связывают стратегии с действиями: это установки, задающие поведение. Например, принцип «нулевого доверия» или «безопасности по умолчанию». Уровень 3. Области применения («Где развиваем способности») Здесь выделяются 33 домена — тематические области, группирующие практики по функциональной принадлежности. Каждый домен описывает определённую способность организации. Уровень 4. Конкретные действия («Что делаем»)Здесь выделяется 390+ практик. Практики — конкретные меры и действия, которые организация должна реализовать для достижения целей киберустойчивости. Рисунок 2. Распределение стратегий антихрупкости по четырём дистанциям Вышеописанная схема является интерактивной: кликнув на домен, можно ознакомиться с относящимися к нему практиками. Рисунок 3. Информация о входящих в домен «Обнаружение и реагирование» практиках Также можно использовать строку поиска для выделения интересующих вас практик. Рисунок 4. Результат поискового запроса Фреймворк можно выгрузить в виде файла формата XLS, в котором также представлен инструмент самооценки. Рисунок 5. Фрагмент фреймворка в формате XLS Индекс антихрупкостиИндекс антихрупкости — показатель, позволяющий оценить в процентном соотношении, насколько компания готова к «чёрным лебедям», т. е. труднопредсказуемым событиям. Индекс построен на базе фреймворка и отвечает на вопрос: способна ли компания пережить кибератаку, продолжать работу в её условиях и восстановиться после неё. Итог оценки — индекс антихрупкости от 0 до 100 %, разбор по направлениям защиты и сравнение с другими участниками индустрии. Отраслевой уровень обновляется автоматически по мере накопления ответов респондентов.Индекс не заменяет регуляторные оценки, а дополняет их в областях, которые проверяют реальную киберустойчивость: восстановление и непрерывность бизнеса, кризис-менеджмент, threat hunting, безопасная разработка, безопасность ИИ, отказоустойчивость, культура киберучений и другие. Разберём, как пользоваться инструментом оценки.Как проходит оценкаС сервисом можно ознакомиться на официальном сайте. Вы отвечаете на сто коротких вопросов о том, какие практики киберустойчивости есть в компании. Оценка полностью анонимна: контактные данные и название компании не запрашиваются. У каждой оценки есть только уникальный идентификатор — он понадобится, если вы захотите задать вопрос по полученным результатам. Рисунок 6. Расчёт Индекса антихрупкости (приветственное окно) Заполнение профиля компанииДля получения оценок, релевантных профилю вашей организации, необходимо указать параметры из выпадающего списка: Сфера деятельности компании.Общее количество сотрудников.Число ИБ-сотрудников.Число ИТ-сотрудников.Оценку формирует руководитель ИБ или тот, кто отвечает за информационную безопасность в компании. Часть вопросов затрагивает смежные зоны — резервное копирование, непрерывность бизнеса, безопасную разработку, взаимодействие с юристами и PR. Если по ним нет уверенности, лучше уточнить у коллег: точность ответов напрямую определяет пользу результата. Рисунок 7. Пример заполненного профиля организации Заполнив все поля, можно переходить к следующему шагу. Для этого нажмите кнопку «Посмотреть показатели по отрасли».Построение бенчмаркаВ следующем разделе нам становится доступен бенчмарк, отражающий индекс антихрупкости и оценку в разрезе стратегий антихрупкой ИТ-архитектуры в среднем по отрасли. В качестве примера мы выбрали сферу деятельности «финансовый сектор». Рисунок 8. Экспресс-оценка показателей киберустойчивости по отрасли Ниже приводится оценка по стратегиям в табличном виде. Рисунок 9. Индекс антихрупкости в разрезе стратегий и практик по отрасли Прохождение опросаДля расчёта своего индекса антихрупкости пользователю предлагается пройти опрос по 100 практикам, каждая из которых имеет пять вариантов ответа:«Да» (выполняется системно).«Частично» (с ограниченным охватом).«Нет» (не выполняется или выполняется ad hoc, т. е. разово или под конкретную задачу).«Неприменимо» (не используется в организациях данного типа). Этот ответ следует выбрать, если, например, в организации нет такого процесса или системы. При выборе этого варианта метрика исключается из расчёта.«Не знаю» (затрудняюсь оценить). Метрика исключается из расчёта. Рисунок 10. Опрос в рамках стратегий и практик Результат отображается сразу после ответа на последний вопрос. Для расчёта индекса необходимо выбрать «Показать результаты». В том случае, если не все практики были оценены, появится окно с предупреждением и расчёт будет проведён с ограничениями. Рисунок 11. Предупреждение пользователя Оценка результатовНа вкладке «Результаты» отображается текущий уровень киберустойчивости организации, а также сопоставление этого уровня с показателями по отрасли в виде шкалы и радарной диаграммы («диаграммы-паука»). Рисунок 12. Экспресс-оценка киберустойчивости в виде шкал Рисунок 13. Экспресс-оценка киберустойчивости в разрезе стратегий При сравнении учитываются только критерии, по которым даны ответы. Ознакомиться с ними можно ниже в табличном виде. Рисунок 14. Оценка антихрупкости в разрезе доменов — групп практик Информацию по экспресс-оценке киберустойчивости организации можно скачать в виде готового отчёта. Он доступен в формате PDF и представляет собой готовый буклет для ознакомления в электронном виде или печати на бумаге. Рисунок 15. Выгрузка готового отчёта Рисунок 16. Фрагмент отчёта экспресс-оценки киберустойчивости организации ВыводыАнтихрупкость сегодня — ключевая стратегия выживания и роста компаний в условиях постоянных рисков: кибератак, ухода вендоров, сбоев инфраструктуры, регуляторных изменений и т. п. Она не заменяет классическую ИБ — она дополняет её способностью пережить успешную атаку.В современном ИТ‑ландшафте недостаточно просто держаться на плаву, нужно заранее готовиться к тому, чего нельзя предсказать. Именно поэтому антихрупкость становится центральным элементом зрелой ИТ‑стратегии и обязательным ориентиром при проектировании архитектуры, управлении инцидентами и планировании цифровой трансформации.Компания «Инфосистемы Джет» переводит концепцию антихрупкости на язык конкретных инженерных и управленческих решений. Она даёт бизнесу рабочие инструменты — собственный Фреймворк антихрупкой ИТ‑архитектуры, помогающий выстроить понятный путь от стратегии к конкретным действиям, и Индекс антихрупкости, который помогает увидеть, насколько компания реально готова к сбоям, атакам и внезапным переменам.Компания планирует и далее развивать Фреймворк: адаптировать его к специфике различных отраслей, разработать вариативные сценарии применения в зависимости от контекста.Достоинства:Открытая методология, доступная любому пользователю без оплаты и регистрации.Каскадная, понятная архитектура с чёткой логикой: семь стратегий достижения антихрупкости, 10 принципов, 33 домена и 390+ практик.Наличие веб-сервиса для оценки антихрупкости ИТ-архитектуры, в котором прохождение полного опроса по 100 критериям оценки занимает в среднем 20 минут.Возможность ознакомиться с показателями антихрупкости в среднем по отрасли.Представление результатов оценки в графическом и табличном формате.Формирование готового отчёта по итогам экспресс-оценки киберустойчивости с возможностью его выгрузки на компьютер.Недостатки:Ценность фреймворка сложно понять, если предварительно не ознакомиться с теорией антихрупкой ИТ-архитектуры.Для точной оценки индекса антихрупкости рекомендуется располагать полной информацией о деятельности компании и не пропускать ни одного критерия оценки. По уровню детализации Фреймворк антихрупкой ИТ-архитектуры относится к стратегическому и методическому уровню. Детальные технические регламенты, архитектурные стандарты, требования к настройке конкретных систем должны разрабатываться на следующем уровне детализации.Читать далее
    • demkd
      возможность есть, гляну, размер переменных окружения действительно 32767 максимум, но конкретно path больше 4095 это уже может стать проблемой.
    • Ego Dekker
      ESET Online Scanner 4.0.1  (Windows 10/11, 64-разрядная)
                                                                                  ●
              Руководство пользователя ESET Online Scanner 4  (PDF-файл)
×