Тест родительских контролей (апрель 2014)

Сегодня родители стремятся всячески оградить детей от нежелательного контента в сети Интернет. Поэтому становятся крайне востребованными специальные программы фильтрации, получившие название «родительский контроль». В данном тесте, ставшем уже регулярным, мы проверяли эффективность популярных программ для фильтрации нежелательных для детей интернет-сайтов. Результаты теста должны помочь родителям выбрать наиболее качественную защиту для своих детей, только начинающих осваивать просторы глобальной сети.

 

 

Оглавление:
- Введение
- Перечень тестируемых решений
- Описание тестового стенда
- Измерение эффективности родительских контролей
- Итоговые результаты теста
- Анализ изменений в сравнении с предыдущими тестами
- Комментарии к тесту

 

Введение

О наличии функции родительского контроля в своих комплексных продуктах для защиты домашних компьютеров заявляют все ведущие антивирусные производителя. Под влиянием законодательства Российской Федерации (Законы № 436-ФЗ «О защите детей от информации, причиняющей вред их здоровью и развитию», № 149-ФЗ «Об информации, информационных технологиях и о защите информации» и №139-ФЗ) стали массово появляться новые компании, предлагающие на рынке свои интернет-фильтры, зачастую с сомнительной эффективностью.

В данном тесте, уже четвертом по счету, мы проверяли истинную эффективность популярных программ для фильтрации нежелательных для детей интернет-сайтов. Результаты данного теста должны помочь родителям выбрать наиболее качественную защиту для своих детей, осваивающих просторы глобальной сети.

Важно отметить, что в нашем тесте мы не сравнивали функциональное наполнение продуктов, наличие или отсутствие каких-либо настроек, функций и прочего. Мы проверяли непосредственно эффективность работы фильтров, исходя из предположения, что у ребенка имеется доступ к сети и «родительский контроль» настроен согласно рекомендациям производителя.

Эффективность фильтрации проверялась только на категории «сайтов для взрослых», как наиболее массовой и сложной с точки зрения фильтрации. Однако результаты теста с определенными допущениями вполне могут быть перенесены и на другие категории сайтов.

 

Перечень тестируемых решений

Для участия в тесте было отобрано 14 решений, представляющих собой как специализированные продукты и сервисы «родительского контроля», так и решения класса Internet Security, содержащие модули «Родительский контроль».

  1. Avira Family Protection Suite 2014 (14.03.350)
  2. Bitdefender Internet Security 2014 (17.27.0.1146)
  3. ContentKeeper Express /* дисквалифицирован */
  4. Dr.Web Security Space 9.0 (9.0.1.03040)
  5. Entensys KinderGate Parental Control 3.0.9436.0.1
  6. Eset NOD32 Smart Security 7.0.302.26
  7. K9 Web Protection 4.4.276
  8. Kaspersky Internet Security 2014 (14.0.0.4651(f))
  9. McAfee Internet Security 12.8.934
  10. Norton Family 2.9.5.29
  11. Panda Internet Security 2014 /* дисквалифицирован */
  12. SkyDNS 2.4.6.4
  13. Trend Micro Titanium Maximum Security 2014 (7.0.1206)
  14. Microsoft Windows Live Family Safety («Семейная безопасность» Windows Live)

 

Следует сразу же отметить, что Panda Internet Security и ContentKeeper Express сошли с дистанции и, в итоге, не были протестированы. Причина дисквалификации заключается в том, что эти родительские контроли не работают под бразуером Microsoft Internet Explorer 11, используемом в тесте согласно методологии. Ситуацию усугубляет тот факт, во многих версиях операционной системы Windows этот браузер является штатным и используется по умолчанию.

В силу объективных ограничений, мы не смогли протестировать все возможные интернет-фильтры для детей, в том числе специализированные утилиты. Поэтому, в списке присутствуют только известные продукты, которые активно продвигаются на российском рынке.

  

Описание тестового стенда

Тест проводился в январе-марте 2014 под операционной системой Microsoft Windows 7 x64 SP1 (Домашняя Расширенная) со всеми установленными обновлениями. В качестве браузера использовался стандартный для этой операционной системы Microsoft Internet Explorer 11.

Очевидно, что проверить эффективность решений «родительских контроля» на всех нежелательных сайтах не представляется возможным в принципе. Поэтому, важнейшей задачей подготовки теста был отбор репрезентативного набора ссылок, который будет корректно отражать эффективность работы тестируемых решений на всей генеральной совокупности.

Согласно методологии в данном тесте мы решили ограничиться проверкой родительских контролей по эффективности блокировки сайтов только порнографической и эротической тематики. Для этого, по специальному набору популярных ключевых слов, из поисковых систем Яндекс, Google и Bing были отобраны 800 ссылок на сайты категории «для взрослых» (400 на русском и 400 на английском языках). Точный список поисковых запросов по соображениям цензуры не публикуется, и доступен сугубо представителям производителей тестируемых решений по запросу.

  

Измерение эффективности родительский контролей

Для анализа результатов мы разбили общий массив ссылок на несколько категорий. Таким образом, результаты эффективности фильтрации нежелательных сайтов, найденных на разных языках (русский и английский) в разных поисковых системах (Bing, Google и Яндекс), представлены в таблицах 1-2 и рисунках 1-4.

 

Таблица 1: Результаты блокировки нежелательных сайтов по русскоязычным запросам

Russian Bing Google Yandex Среднее
KinderGate 396 99% 397 99% 400 100% 99,4%
Dr.Web 397 99% 395 99% 397 99% 99,1%
Kaspersky 397 99% 393 98% 398 100% 99,0%
SkyDNS 393 98% 380 95% 398 100% 97,6%
K9 395 99% 376 94% 396 99% 97,3%
Eset 390 98% 378 95% 391 98% 96,6%
Microsoft 385 96% 374 94% 383 96% 95,2%
Norton 388 97% 366 92% 388 97% 95,2%
Avira 391 98% 368 92% 383 96% 95,2%
BitDefender 365 91% 352 88% 357 89% 89,5%
Trend Micro 344 86% 310 78% 342 86% 83,0%
McAfee 335 84% 295 74% 305 76% 77,9%

 

Рисунок 1: Результаты блокировки нежелательных сайтов по русскоязычным запросам для разных поисковиков

Результаты блокировки нежелательных сайтов по русскоязычным запросам для разных поисковиков 

 

Как видно на рисунке 1, эффективность блокировки нежелательных сайтов, найденных по запросам на русском языке, в меньшей степени стала зависеть от поисковика, чем годом ранее. Интересно, что найденные через поисковую систему Google сайты стали блокироваться хуже, чего не наблюдалось никогда ранее. Наиболее безопасным поисковиком для русского языка стал Bing.

 

Рисунок 2: Средние результаты блокировки нежелательных сайтов по русскоязычным запросам для всех поисковиков

Средние результаты блокировки нежелательных сайтов по русскоязычным запросам для всех поисковиков 

 

Как видно на рисунке 2, все протестированные продукты и сервисов за исключением одного, показали высокие результаты, заблокировав более 80% сайтов найденных по русскоязычным запросам. При этом девять из двенадцати преодолели барьер в 95%.

В блокировке нежелательных для детей сайтов на русском языке традиционно сильны российские производители. KinderGate, Dr.Web Secure Space и Kaspersky Internet Security смогли показать недостижимую ранее эффективность блокировки более 99%. Результаты зарубежных конкурентов оказались заметно ниже.

Что касается блокировки нежелательных сайтов, найденных по поисковым запросам на английском языке, то здесь в целом дела обстоят немного хуже, чем на русском языке. В прошлые годы, блокировка сайтов по англоязычным запросам напротив удавалась тестируемым продуктам лучше.

 

Таблица 2: Результаты блокировки нежелательных сайтов по англоязычным запросам

English Bing Google Yandex Среднее
KinderGate 392 98% 398 100% 398 100% 99,0%
Dr.Web 400 100% 384 96% 396 99% 98,3%
Kaspersky 395 99% 383 96% 396 99% 97,8%
Microsoft 390 98% 372 93% 393 98% 96,3%
SkyDNS 384 96% 368 92% 396 99% 95,7%
K9 384 96% 364 91% 393 98% 95,1%
BitDefender 381 95% 364 91% 387 97% 94,3%
Eset 376 94% 361 90% 393 98% 94,2%
Norton 377 94% 356 89% 391 98% 93,7%
Avira 376 94% 342 86% 383 96% 91,8%
Trend Micro 362 91% 335 84% 382 96% 89,9%
McAfee 332 83% 292 73% 368 92% 82,7%

 

Рисунок 3: Результаты блокировки нежелательных сайтов по англоязычным запросам для разных поисковиков

Результаты блокировки нежелательных сайтов по англоязычным запросам для разных поисковиков 

 

Если взглянуть на разбивку по поисковикам на рисунке 3, то видна заметное ухудшение блокировки сайтов, найденных по англоязычным запросам в поисковой системе Google. Наиболее же безопасной поисковой системой для англоязычных запросов в этом году оказался Яндекс.

 

Рисунок 4: Средние результаты блокировки нежелательных сайтов по англоязычным запросам для всех поисковиков

Средние результаты блокировки нежелательных сайтов по англоязычным запросам для всех поисковиков 

 

Как видно из таблицы 2 и рисунка 4, девять протестированных «родительских контролей» смогли заблокировать более 90% нежелательных сайтов. Три из них: KinderGate, Dr.Web Secure Space и Kaspersky Internet Security, покорили планку в 97%.

В среднем по индустрии результаты блокировки нежелательных для детей сайтов на английском языке стали немного хуже, чем на русском.

 

Итоговые результаты теста

Чтобы подвести общие результаты теста решений «родительского контроля» по эффективности блокировки нежелательных сайтов необходимо дополнительно рассмотреть их уровень ложных срабатываний. Дело в том, что суть технологии интернет-фильтрации состоит в блокировке доступа к нежелательным категориям сайтов при обеспечении полной доступности нормальных, легитимных сайтов.

Поэтому мало создать интернет-фильтр, который будет блокировать все 100% нежелательных для детей сайтов. Важно при этом обеспечить доступность сайтов с нормальным контентом. Иначе минусы от использования фильтрации будут затмевать плюсы от нее и пользоваться Интернетом будет попросту невозможно. Именно этот принцип мы учли в схеме награждения лучших решений «родительского контроля» по результатам данного теста.

Таким образом, общие результаты теста решений «родительского контроля» по эффективности блокировки нежелательных сайтов, независимо от языка поисковых запросов, а также уровень их ложных срабатываний представлены на рисунке 4 и в таблице 3.

 

Рисунок 5: Итоговые результаты блокировки нежелательных сайтов

Итоговые результаты теста родительских контролей 2014 


Таблица 3: Итоговые результаты теста и полученные награды

Родительский контроль Среднее FP  Награда 
KinderGate 99,21% 0,30%

Platinum Parental Control Award

Platinum Parental Control
Award

Kaspersky 98,42% 1,00%

Gold Parental Control Award

Gold Parental Control
Award

 

K9 96,17% 0,40%
Norton 94,42% 0,10%
Avira 93,46% 0,60%
Eset 95,38% 1,60%

Silver Parental Control Award

Silver Parental Control Award

BitDefender 91,92% 1,50%
Trend Micro 86,46% 0,40%
SkyDNS 96,63% 2,60%

Bronze Parental Control Award 

Bronze Parental Control Award 

McAfee 80,33% 1,40%
Microsoft 95,71% 3,60% Нет наград
Dr.Web 98,75% 4,20%
ContentKeeper - - Дисквалифицированы
Panda - -

 

Лучшим по эффективности фильтрации на тестовой коллекции оказался KinderGate Parental Control, заблокировавший в общей сложности 99% нежелательных для детей сайтов. При этом уровень ложных срабатываний KinderGate оказался всего 0,3%. Этот родительский контроль получает наивысшую награду Platinum Parental Control Award.

Совсем немного отстал от лидера Kaspersky Internet Security заблокировавший свыше 98% нежелательных сайтов. Его уровень ложных срабатываний не превысил 1%.  В группу лидеров также попали K9 Web Protection (новичок нашего теста), Norton Family и Avira Family Protection Suite, заблокировавшие более 93% нежелательных сайтов и допустившие не более 1% ложных срабатываний. Эти четыре родительских контроля получают награду Gold Parental Control Award.

В группе лидеров хочется отметить Norton Family, который показал минимальный для всей индустрии уровень ложных срабатываний – всего 0,1%.

Очень хорошую эффективность с результатами более 90% показали Eset NOD32 Smart Security, Bitdefender Internet Security, но повышенный уровень ложных срабатываний 1.6 и 1,5% соответственно не позволил им подняться выше в итоговой таблице. Вместе с идущим следом Trend Micro Titanium Maximum Security они получают награду Silver Parental Control Award.

Сервис SkyDNS, несмотря на очень высокий результаты по блокировке в 96%, из-за высокого уровня ложных срабатываний 2,6% не смог побороться за лидирующие позиции и вместе с McAfee Internet Security получает награду Bronze Parental Control Award

Остальные решения «родительского контроля», увы, остались без наград. Двое из них – Dr.Web Security Space и Microsoft Windows Live Family Safety («Семейная безопасность» Windows Live) могли бы рассчитывать на самые высокие награды, если бы не очень большое количество ложных срабатываний.

В случае с Dr.Web Security Space множество ложных срабатываний было допущено в следствие неверной категоризации сайтов, когда ряд крупных сайтов (социальных сетей, блогосфер, видеохостингов, популярных развлекательных порталов и т.д.) попадают в категорию порнографии и блокируются полностью. Полная блокировка является осознанным решением производителя, однако, несмотря на сходство с подходом, который был впервые применён при решении проблемы знаменитого «гордиева узла», оно, скорее, вызывает недоумение пользователей.

Крайне неприятным сюрпризом теста в этом году стал сход с дистанции двух испытуемых продуктов: ContentKeeper Express и Panda Internet Security. Причина дисквалификации заключается в том, что эти родительские контроли не работают под бразуером Microsoft Internet Explorer 11, используемом в тесте согласно методологии.

 

Анализ изменений в сравнении с предыдущими тестами

В заключение хотелось бы проанализировать результаты эффективности решений «родительского контроля» по сумме двух тестов за 2012 и 2014 годы. Для этого к результатам этого теста добавим результаты предыдущего теста, выполненного по той же базовой методологии. Таким образом, можно проследить изменения в эффективности блокировки нежелательных для детей сайтов порнографической направленности, см. рисунки 6-7.

K9 Web Protection и Eset NOD32 Smart Security являются новичками тестов, поэтому проследить динамику изменений его результатов невозможно. Для Bitdefender Internet Security и Norton Family можно использовать данные за 2011 год, так как в предыдущем тесты эти родительские контроли были дисквалифицированы.

 

Рисунок 6: Динамика изменений эффективности решений «родительского контроля»

Динамика изменений эффективности решений «родительского контроля» 


Рисунок 7: Динамика изменений эффективности родительских контролей

Динамика изменений эффективности родительских контролей 

Для Bitdefender Internet Security и Norton Family вместо 2012 года используются данные за 2011 год.

Как видно из рисунков 6-7, за прошедший год некоторые вендоры сумели заметно улучшить эффективность своих технологий фильтрации нежелательного для детей контента. Существенную положительную динамику продемонстрировали Bitdefender, Microsoft и SkyDNS. Другие родительские контроли остались примерно на том же уровне.

Большая часть участников тестов демонстрирует положительную динамику по уменьшению количества ложных срабатываний. Особенно здесь выделяется Dr.Web Security Space, чье количество ложных срабатываний уменьшилось почти на 1%. К сожалению, есть и такие продукты, у которых количество ложных срабатываний значительно увеличилось. К их числу относятся SkyDNS, McAfee Internet Security и Microsoft Windows Live Family Safety. 

Если посмотреть на изменения картины в целом, то мы можем увидеть постепенное подтягивание к группе лидеров тех производителей, которые ранее не уделяли должного внимания развитию технологий веб-фильтрации и категоризацией интернет-сайтов.

С другой стороны, лидеры последних лет подтверждают свой уровень и не собираются сдавать позиции.

 

Комментарии к тесту


Илья Шабанов, управляющий партнер Anti-Malware.ru:

«Если говорить в целом об индустрии, то я оцениваю результаты теста положительно. Во-первых, впервые в истории наших тестов одним из участников преодолен уровень блокировки нежелательных для детей сайтов в 99%. Еще несколько участников вплотную подошли к этому уровню. И все это без ущерба уровню ложных срабатываний. Во-вторых, мы наблюдаем постепенное подтягивание отстающих участников по результатам предыдущих лет к группе лидеров. В ближайшем будущем технологическая конкуренция в этом сегменте рынка может еще больше усилиться.

С другой стороны, вызывает вопросы дисквалификация некоторых участников из-за проблем с работой в Microsoft Internet Explorer 11. Такие родительские контроли не смогут защитить детей при работе на Windows 7/8, где этот браузер встроен по умолчанию».

 

Константин Игнатьев, руководитель группы анализа веб-контента «Лаборатории Касперского»:

«Мы очень рады, что модуль «Родительский контроль» в очередной раз получил высокую оценку специалистов. Мы постоянно работаем над улучшением продукта и задействованных в нем технологий, и подобные награды хороший индикатор качества нашей работы. Кроме того, приятно видеть, что с каждым годом все больше защитных решений занимают призовые места, демонстрируя высокие результаты в тестированиях. Это значит, что проблеме безопасности детей в Интернете с каждым днем уделяется все больше внимания».

 

Дмитрий Курашев, директор компании Entensys:

«Считаю очень важным, что эксперты Anti-Malware.ru проводят подобные тесты. Конечно, существует множество критериев, по которым можно тестировать интернет-фильтры. Среди них, кроме тех, по которым проводился данный тест, я бы назвал прежде всего те, которые связаны с соответствием законодательству РФ. Это экстремизм, наркотики, нецензурная лексика, азартные игры и т.д. Мы, конечно же, проводим большую работу по всем этим направлениям. В любом случае важно, что, благодаря такому тестированию, есть хоть какие-то объективные результаты.

Кстати говоря, уже после начала теста вышла обновленная версия нашего KinderGate. Мы самостоятельно проверили, как бы она проявила себя в этом тесте и убедились, что результат по детекции был бы еще выше, примерно на 0,4%, по причине улучшенной работы с HTTPS».

 

Михаил Кондрашин, технический директор Trend Micro в России:

«Вызывает большие вопросы методология, которая во-первых из всех возможных функций родительского контроля рассматривает только одну - фильтр сайтов, а во-вторых, фильтр сайтов тестируется моделированием поведения ребенка, который целенаправленно ищет в интернете непристойные сайты. На мой взгляд, такое поведение не является типичным для детей. С другой стороны, если ребенок проявляет такие интересы и знает такие ключевые слова, то наивно полагать, что какой-либо программный продукт может помочь.

Представляется разумным моделирование поведения обыкновенного ребенка, который не проявляет целенаправленного интереса, но в рискует столкнуться с контентом категории 18+ непреднамеренно. Таким образом, возможно более адекватным был бы выбор ключевых слов и "группы риска", таких как "девочки", "клубничка" и т.п.»

 
 
 
Anti-Malware Яндекс ДзенПодписывайтесь на канал "Anti-Malware" в Telegram, чтобы первыми узнавать о новостях и наших эксклюзивных материалах по информационной безопасности.
Если вы являетесь производителем и хотели бы видеть свой продукт в списке протестированных по данной методологии или обновить его результаты, не дожидаясь нового планового теста, вы можете воспользоваться услугой индивидуального тестирования.