Перейти к содержанию
Сергей Ильин

План тестов на 2009 года

Recommended Posts

Сергей Ильин

Мы сейчас работаем на планом тестов на 2009 год и хотелось бы услышать ваши предложения.

  1. Какие тесты обязательно должны быть и почему?
  2. Какие очень было бы желательно провести и почему?
  3. От каких тестов стоит отказаться (может и такое нужно) и почему?

Заранее спасибо за все ваши предложения, постараемся все учесть!

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Илья Рабинович

Думаю, что обязательно нужны тесты на:

1. Динамическую защиту от 0-day.

2. Статические тесты эвристика и сигнатур.

3. Самозащита.

4. Контроль траффика напобие matousec.

5. Скорость/загрузка ресурсов системы.

И ещё одна идейка- как насчёт сравнительных тестов DLP-систем на уровень защиты от преднамеренных утечек?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Deja_Vu

Кстати... вот ЛК утверждает, что их эмулятору обязательно нужен реальный процессор.

Хорошо бы провести тест Проактивки на виртуалках и на реальных машинах, тех продуктов у кого эмулятор заявлен.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
vaber
Кстати... вот ЛК утверждает, что их эмулятору обязательно нужен реальный процессор.

Хде??

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Deja_Vu

vaber

лень искть ссылки, кто нить из ЛК тут отпишется ... возможно я и ошибаюсь.. но вроде так оно и есть.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Umnik

vaber

Ничего не придумал, это заявление разработчиков. :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
vaber

Не правда. Эффективность эвристика у KIS можно считать одинаковой что под VMware, что на реальной машине.

Ничего не придумал, это заявление разработчиков. smile.gif

Да? Интересно. А можно узнать в личку кто именно заявлял такое? С целью прояснить ситуацию и, если окажется, что это действительно так - будем менять методику :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Александр Шабанов
И ещё одна идейка- как насчёт сравнительных тестов DLP-систем на уровень защиты от преднамеренных утечек?

Илья, дело в том, что любой вендор скажет, что их система только от непреднамеренных утечек, и не гарантирует защищу от сговора злоумышленников, в этом случае DLP-система будет работать только как архив для пост-анализа, поправьте меня, если я не прав. Поэтому результат такого теста скорее всего не будет иметь обратной связи, а только покажет, что действительно так как говорят вендоры.

Интересней на мой взгляд было попробовать самозащиту клиентских агентов, которые снимают теневые копии. Только не их деинсталляцию, так как это сразу вызовет кучу вопросов в корпоративной среде, а выведение их из строя, типа в случае чего - "чего-то ваша система сама по себе не пашет" :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Umnik

vaber

Я это через "посредника" знаю :) От одного из тестеров, который, собственно, занимался этим плотно. На работу пойду в конце недели только, тогда у него и спрошу.

Может Гудилин может быстрее сказать?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
И ещё одна идейка- как насчёт сравнительных тестов DLP-систем на уровень защиты от преднамеренных утечек?

Есть такая идея, но тест реально сложный и потребует как минимум тесного сотрудничества с кем-то из крупных интеграторов (например, Крок или Лета). Есть уже у меня примерная методология даже, удалось даже обсудить ее с Ричем Могулом, когда он был в Москве.

Вообщем пока вот такой списочек получается амбициозный:

Тесты которые точно будут:

1. Динамический I

2. Лечение активного заражения IV

3. Самозащита III (может быть на Vista?)

4. Быстродействие II

5. Эвристика III

Под вопросом:

1. Тест на защиту от полиморфных вирусов II

2. Пакеры II

3. Тест фаерволов (новый тест).

4. Интерфейсы (новый тест)

Все таки напомню про тестирование браузеров!

Тест интересный, но мы его в план не будем включать по причине непрофильности, если только кто-то займется им из нашего компьюнити вне плана, мы поддержим.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
dr_dizel

Я думаю, что уже актуальность есть и в тете АВ-решений на x64. Их вообще кто-то тестирует?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Deja_Vu
Не правда. Эффективность эвристика у KIS можно считать одинаковой что под VMware, что на реальной машине.

Да? Интересно. А можно узнать в личку кто именно заявлял такое? С целью прояснить ситуацию и, если окажется, что это действительно так - будем менять методику :)

Предлагаю просто проверить тестом ;)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Umnik

Я бы хотел приблизить результаты некоторых тестов к повседневным результатам на ПК пользователя. Например, провести параллельно тесты проактивной защиты, тест на фолсы и тест на поддержку упаковщиков и дать не отдельные результаты, а общий. И, кроме тех результатов, что выкатит АМ в ходе совместных переговоров форумчан, дать заполненную форму в Экселе, чтобы пользователь сам мог поменять весы так, как для него важнее и тут же увидеть интересные лично ему результаты.

Тест самозащиты. Я считаю тот, что был представлен недавно, неверным, провальным. Методику теста самозащиты тоже нужно оговорить совместно. Что касается Висты, то да, нужно. Но только не именно на ней, а и на ней тоже.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Илья Рабинович
Тест самозащиты. Я считаю тот, что был представлен недавно, неверным, провальным. Методику теста самозащиты тоже нужно оговорить совместно.

Кстати, да. Полностью поддерживаю. Если зловред прошёл на уровень ядра, то защите каюк. Так что дебильный перехват ZwTerminateProcess/NtTerminateProcess не спасёт, вынесут всё нафиг через низкоуровневые менеджеры или прямой манипуляцией с системными списками.

Ну и завершение процесса защиты через Task Manager- это легитимное действие, если на уровень защиты это не влияет либо влияет только положительно в случае полностью автоматического принятия решений.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
Я думаю, что уже актуальность есть и в тете АВ-решений на x64. Их вообще кто-то тестирует?

Я не припомню специальных тестов. Что можно протестировать специально для x64?

Что касается Висты, то да, нужно. Но только не именно на ней, а и на ней тоже.

Чтобы не создавать иллюзий, сразу скажу, что это нереально. Имеет смысл делать отдельно как разных платформах, сегодня тест самозащиты на XP, через пол года на Vista и т.п. Я против долгостроев и мегатестов в стиле "все в куче".

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
dr_dizel
Я не припомню специальных тестов. Что можно протестировать специально для x64?

Что заявлено аверами то и тестировать. Адаптировать все тесты наши. Тот же KIS для XP x86 совсем не то же самое что для Vista x64.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Umnik

Сергей Ильин

СЗ на ХР и Висте сильно отличаются. СЗ на 32 и 64 сильно отличаются. СЗ на ХР 32 и Висте 64 ну оооочень сильно отличаются.

Т.е. даже не реальные 100% на ХР ничего не означают на Висте СП 1. Уж тем более СП 0.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин

Да, самозащиту на Windows Vista на делать, это факт, лучше даже на x64 стразу, эта платформа более прогрессивная.

Также я бы быстродействие сделал на Windows Vista в этот раз.

Может быть даже на активное тест стоит подумать под Windows Vista, если зловредов наберется.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

  • Сообщения

    • Dmitrius
      Сервис подбора и сравнение кредитов Случается так, что деньги нужны срочно. Поэтому если у вас нет накоплений, рациональней всего обратиться за помощью на этот сайт, где собраны надежные, проверенные банки, которым точно можно доверять. Учреждения подготовили лучшие предложения, которые только возможны. На этом сайте есть возможность подобрать кредит, а также оформить займ либо взять деньги на приобретение автомобиля. И самое главное, что все это на наиболее выгодных для вас условиях. Автокредит Казахстан проценты - это шанс купить все, что нужно, не отказывая себе в покупке. Все банковские продукты различаются требованиями, условиями выдачи, а потому рекомендуется детально изучить условия договора и особенности выдачи денежных средств. Потребительский кредит оформить (рассчитать) в Алматы получится в данный момент. На этом сайте вы сможете не только подобрать подходящий вариант, но и сравнить имеющиеся. Затем следует определиться с тем, в какой банк обратиться за материальной поддержкой. Составить заявку на выдачу средств можно в режиме реального времени. Кредит наличными заявка онлайн выдается в течение часа наиболее комфортным для вас способом. На портале опубликован список всех доступных предложений, имеется необходимая информация о каждом банке и кредитах. Выберете самую низкую процентную ставку, а также сумму и сроки, на которые планируете занять сумму. Все максимально просто, быстро и понятно. Ипотека проценты Казахстан (ипотека Казахстан) - это отличная возможность решить свои жилищные проблемы. Важно помнить о том, что лишь надежные компании с огромным опытом готовы предложить приемлемые условия. Выберете подходящий для себя банковский продукт, чтобы поправить материальное положение.
    • Dmitrius
      Интернет магазин автозапчастей  Интернет-магазин «AUTOSHOP» реализует внушительный выбор деталей на автомобили - их можно подобрать не только по наименованию, но и артикулу и другим параметрам. Имеются разные запчасти на любые автомобили самых разных марок и моделей - вы сможете их найти в один клик. Запчасти находятся на складе - это дает возможность осуществить быструю транспортировку. Сотрудничество исключительно с надежными, проверенными поставщиками, которые работают на совесть и предлагают продукцию безупречного качества и с длительными эксплуатационными сроками. Автозапчасти интернет магазин для иномарок рекомендует ознакомиться с полным ассортиментом – он даст возможность подобрать вариант с учетом обозначенных требований. Перед тем, как осуществить приобретение, необходимо детально изучить технические аспекты, ведь именно они влияют на сроки эксплуатации и внешний вид авто. Но если вам требуется помощь специалиста, то вы всегда можете воспользоваться профессиональной консультацией. Автозапчасти для иномарок Курск вы обязательно подберете для любой машины, несмотря на год производства. Изучите справочник автотоваров, каталог, а также новости, представленные на данную тематику - информация поможет принять правильное решение. Сотрудники интернет-магазина быстро реагируют на появление новых деталей в европейских магазинах для того, чтобы в ближайшее время пополнить ими свой ассортимент. Это даст возможность быстро среагировать за изменяющуюся ситуацию. Каталог автозапчастей Курск содержит огромный перечень деталей. Они созданы в соответствии с самыми высокими стандартами, нормами, требованиями. Администрация проверяет запчасти на соответствие заданным характеристикам, поэтому в продажу попадает только та продукция, которая имеет сопроводительную документацию, сертификаты. На продукцию есть гарантии, подтверждающие безупречное качество, оригинальность.
    • JamesBisee
      Купить газовый котел с закрытой камерой сгорания в Москве
      https://www.fire-flower.ru/
      https://www.google.tg/url?q=https://fire-flower.ru
    • PR55.RP55
      По всей видимости uVS не всегда может получить доступ к: Hosts Нужно чтобы в Лог писалась информация: "Нет доступа  к Hosts " Вроде сейчас uVS  соответствующих записей не создаёт?
    • Dmitrius
      Канализация из септиков под ключ На предприятии каждый сможет заказать установку септиков, созданных из ЖБ конец - они не только практичны, но и отличаются безукоризненным качеством. Ищите где заказать монтаж септика астра - получите всю необходимую информацию на сайте. Важным моментом является то, что услуги оказываются на должном, профессиональном уровне. Это достигается за счет того, что в бригаде трудятся специалисты, которые знают все особенности своей работы. При этом стоимость работ остается на доступном уровне. Огромный стаж работы позволил приобрести большое количество клиентов – они советуют предприятие знакомым. Бетонные септики пользуются популярностью не только за счет своей небольшой стоимости, но и благодаря прочности, а также невосприимчивы к негативным условиях среды, они не нуждаются в сервисном обслуживании. И самое важное, что установка проводится на грунте любого типа. Такой вид септика считается самым быстрым способом организовать очистное сооружение на дачном участке. Сотрудники предприятия специально для вас подготовят предложение, произведут расчеты, грамотно расположат септик, а заодно и закупят все необходимые материалы по доступным ценам, выполнят доставку и монтажные работы. На все, включая материалы, предоставляются гарантии. Услуги оказываются не только по столице, но и области, на любом грунте: песке, глине и др. Монтаж септиков различной сложности, а также с подключением бани или дачи, переливом, любых соединений. Есть возможность вызвать целую бригаду специалистов на малый участок либо дачу, на которой вы проживаете время от времени или постоянно. Монтажные работы в ограниченные сроки. Во время монтажных работ учитывается то, сколько человек проживает в доме, особенности – о них поведает консультант. Теперь и вы сможете заказать высококлассные работы.
×