Тест родительских контролей (декабрь 2012)

Сегодня родители и государство стремятся всячески оградить детей от нежелательного контента в сети Интернет. Поэтому становятся крайне востребованными специальные программы фильтрации, получившие название «родительский контроль». В данном тесте мы проверяли эффективность популярных программ для фильтрации нежелательных для детей интернет-сайтов. Результаты данного теста должны помочь родителям выбрать наиболее качественную защиту для их детей, осваивающих просторы глобальной сети.


Оглавление:
Введение
Перечень тестируемых решений
Описание тестового стенда
- Измерение эффективности родительских контролей
- Итоговые результаты теста
- Анализ изменений в сравнении с предыдущими тестами
- Комментарии к тесту

 

Введение

О наличии функции родительского контроля в своих комплексных продуктах для защиты домашних компьютеров заявляют все ведущие антивирусные производители. Под влиянием законодательства Российской Федерации (Законы № 436-ФЗ «О защите детей от информации, причиняющей вред их здоровью и развитию», № 149-ФЗ «Об информации, информационных технологиях и о защите информации» и №139-ФЗ) стали массово появляться новые компании, предлагающие на рынке свои интернет-фильтры, зачастую с сомнительной эффективностью.

В данном тесте, уже третьем по счету, мы проверяли истинную эффективность популярных программ для фильтрации нежелательных для детей интернет-сайтов. Результаты данного теста должны помочь родителям выбрать наиболее качественную защиту для их детей, осваивающих просторы глобальной сети.

Важно отметить, что в нашем тесте мы не сравнивали функциональное наполнение продуктов, наличие или отсутствие каких-либо настроек, функций и прочего. Мы проверяли непосредственно эффективность работы фильтров, исходя из предположения, что у ребенка имеется доступ к сети и «родительский контроль» настроен согласно рекомендациям производителя.

Эффективность фильтрации проверялась только на категории «сайтов для взрослых», как наиболее массовой и сложной с точки зрения фильтрации. Однако результаты теста с определенными допущениями вполне могут быть перенесены и на другие категории сайтов.

 

Перечень тестируемых решений

Для участия в тесте было отобрано 15 решений, представляющих собой как специализированные продукты и сервисы «родительского контроля», так и решения класса Internet Security, содержащие модули «Родительский контроль».

  1. Avira Internet Security 2013 (13.0.0.2832)
  2. Bitdefender Internet Security 2013 (16.24.0.1684) /* дисквалифицирован */
  3. ContentKeeper Express
  4. Dr.Web Security Space 8.0 (8.0.0.11210)
  5. Entensys KinderGate Parental Control 1.5.6371
  6. F-Secure Internet Security 2013 (1.71)
  7. Kaspersky Internet Security 2013 (13.0.1.4190)
  8. McAfee Internet Security 11.6
  9. NetPolice Child /* дисквалифицирован */
  10. Norton Internet Security 2013 () + Norton Safety Minder /* дисквалифицирован */
  11. Panda Internet Security 2013 (18.00.01)
  12. SkyDNS
  13. Trend Micro Titanium Maximum Security 2013 (6.0.1215)
  14. Microsoft Windows Live Family Safety («Семейная безопасность» Windows Live) *
  15. Интернет Цензор 2.2

 

Следует сразу же отметить, что Bitdefender Internet Security, NetPolice  и Norton Internet Security (Norton Safety Minder) сошли с дистанции и, в итоге, не были протестированы.

Причины для дисквалификации были следующими: сервисы NetPolice  и Norton Safety Minder признаны полностью неработоспособными (из-за ошибок невозможно зайти на их веб-сайт и скачать клиентскую программу), а Bitdefender выбыл из теста из-за критической ошибки, не позволяющей корректно определить категорию блокируемого сайта. Потому данные три продукта считаются дисквалифицированными.

В силу объективных ограничений, мы не смогли протестировать все возможные интернет-фильтры для детей, в том числе специализированные утилиты. Поэтому, в списке присутствуют только известные продукты, которые активно продвигаются на российском рынке.

 

 

Описание тестового стенда

Тест проводился (октябрь-ноябрь 2012) на базе тестового стенда под управлением операционной системы Microsoft Windows 7 x64 SP1 (Домашняя Расширенная) со всеми установленными актуальными обновлениями. В качестве браузера использовался стандартный для этой операционной системы Microsoft Internet Explorer 9.

Очевидно, что проверить эффективность решений «родительских контроля» на всех нежелательных сайтах не представляется возможным в принципе. Поэтому, важнейшей задачей подготовки теста был отбор репрезентативного набора ссылок, который будет корректно отражать эффективность работы тестируемых решений на всей генеральной совокупности.

Согласно методологии в данном тесте мы решили ограничиться проверкой решений «родительских контроля» по эффективности блокировки сайтов только порнографической и эротической тематики. Для этого, по специальному набору популярных ключевых слов, из поисковых систем Яндекс, Google и Bing были отобраны 800 ссылок на сайты категории «для взрослых» (400 на русском и 400 на английском языках). Точный список поисковых запросов по соображениям цензуры не публикуется, и доступен сугубо представителям производителей тестируемых решений по запросу.

 

Измерение эффективности родительских контролей

Для анализа результатов мы разбили общий массив ссылок на несколько категорий. Таким образом, результаты эффективности фильтрации нежелательных сайтов, найденных на разных языках (русский и английский) в разных поисковых системах (Bing, Google и Яндекс), представлены в таблицах 1-2 и рисунках 1-4.

 

Таблица 1: Результаты блокировки нежелательных сайтов по русскоязычным запросам

Русский Bing Google Yandex Среднее
Интернет Цензор 400 100% 397 99% 398 100% 99,6%
KinderGate 399 99,8% 395 99% 389 97% 98,6%
Dr.Web 390 98% 388 97% 394 99% 97,7%
Kaspersky 388 97% 378 95% 382 96% 95,7%
Avira 329 82% 361 90% 378 95% 89,0%
ContentKeeper 326 82% 352 88% 359 90% 86,4%
Panda 314 79% 352 88% 366 92% 86,0%
SkyDNS 319 80% 344 86% 358 90% 85,1%
F-Secure 316 79% 342 86% 355 89% 84,4%
Trend Micro 291 73% 354 89% 343 86% 82,3%
McAfee 294 74% 280 70% 311 78% 73,8%
Microsoft 266 67% 311 78% 290 73% 72,3%

 

Рисунок 1: Результаты блокировки нежелательных сайтов по русскоязычным запросам для разных поисковиков

  Результаты блокировки нежелательных сайтов по русскоязычным запросам для разных поисковиков

 

Как видно на рисунке 1, эффективность блокировки нежелательных сайтов, найденных по запросам на русском языке, стала в большей степени зависеть от поисковика. Найденные через поисковую систему Bing сайты блокируются несколько хуже, в отличие от ситуации годом ранее, когда менее безопасным для детей поиском был Google.

 

Рисунок 2: Усреднённые результаты блокировки нежелательных сайтов по русскоязычным запросам для всех поисковиков

Средние результаты блокировки нежелательных сайтов по русскоязычным запросам для всех поисковиков 

 

Как видно на рисунке 2, как и годом ранее, все, кроме двух из протестированных продуктов и сервисов, показали высокие результаты, заблокировав более 80% сайтов найденных по русскоязычным запросам. При этом даже аутсайдеры взяли барьер в 70%,  что не может не радовать.

В блокировке нежелательных для детей сайтов на русском языке традиционно сильны российские производители. Интернет Цензор, KinderGate, Dr.Web Secure Space и Kaspersky Internet Security смогли показать эффективность блокировки более 95%. Результаты зарубежных конкурентов оказались заметно ниже.

Что касается блокировки нежелательных сайтов, найденных по поисковым запросам на английском языке, то здесь в целом дела обстоят немного лучше.

 

Таблица 2: Результаты блокировки нежелательных сайтов по англоязычным запросам

English Bing Google Yandex Среднее
Интернет Цензор 398 99,5% 386 97% 396 99% 98,3%
Dr.Web 396 99% 390 98% 392 98% 98,2%
Kaspersky 395 99% 386 97% 393 98% 97,8%
KinderGate 392 98% 384 96% 393 98% 97,4%
ContentKeeper 384 96% 364 91% 376 94% 93,7%
Microsoft 375 94% 364 91% 370 93% 92,4%
SkyDNS 351 88% 362 91% 380 95% 91,1%
Avira 361 90% 356 89% 374 94% 90,9%
Trend Micro 360 90% 360 90% 358 90% 89,8%
Panda 351 88% 354 89% 373 93% 89,8%
F-Secure 351 88% 358 90% 366 92% 89,6%
McAfee 351 88% 343 86% 344 86% 86,5%

 

Рисунок 3: Результаты блокировки нежелательных сайтов по англоязычным запросам для разных поисковиков

Результаты блокировки нежелательных сайтов по англоязычным запросам для разных поисковиков 

 

Если взглянуть на разбивку по поисковикам на рисунке 3, то, в целом, нет никакой существенной зависимости качества блокировки нежелательных для детей сайтов, найденных по англоязычным запросам в той или иной поисковой системе.

 

Рисунок 4: Усреднённые результаты блокировки нежелательных сайтов по англоязычным запросам для всех поисковиков

Средние результаты блокировки нежелательных сайтов по англоязычным запросам для всех поисковиков 

 

Как видно из таблицы 2 и рисунка 4, почти все протестированные решения «родительского контроля» смогли заблокировать более 89% нежелательных сайтов, и только один из них показал результаты ниже этого значения. Причем четырем продуктам: Интернет Цензор, Dr.Web, Kaspersky и KinderGate, покорилась планка в 97%.

В среднем по индустрии результаты блокировки нежелательных для детей сайтов на английском языке немного лучше, на русском. Наибольшая разница в пользу английского языка заметна на наименее эффективных продуктах, они заметно хуже справляются с фильтрацией нежелательных сайтов на русском языке.

 

 

Итоговые результаты теста

Чтобы подвести общие результаты теста решений «родительского контроля» по эффективности блокировки нежелательных сайтов необходимо дополнительно рассмотреть их уровень ложных срабатываний. Дело в том, что суть технологии интернет-фильтрации состоит в блокировке доступа к нежелательным категориям сайтов при обеспечении полной доступности нормальных, легитимных сайтов.

Поэтому мало создать интернет-фильтр, который будет блокировать все 100% нежелательных для детей сайтов. Важно при этом обеспечить доступность сайтов с нормальным контентом. Иначе минусы от использования фильтрации будут затмевать плюсы от нее и пользоваться Интернетом будет попросту невозможно. Именно этот принцип мы учли в схеме награждения лучших решений «родительского контроля» по результатам данного теста.

Таким образом, общие результаты теста решений «родительского контроля» по эффективности блокировки нежелательных сайтов, независимо от языка поисковых запросов, а также уровень их ложных срабатываний представлены на рисунке 4 и в таблице 3.

 

Рисунок 5: Итоговые результаты блокировки нежелательных сайтов

Итоговые результаты блокировки нежелательных сайтов 

 

Таблица 3: Итоговые результаты теста и полученные награды

Родительский контроль Среднее FP Награда
KinderGate Parental Control 1.5 98,0% 0,6% Gold Parental Control AwardGold Parental Control
Award
Kaspersky Internet Security 2013 96,8% 0,8%
ContentKeeper Express 90,0% 0,5%
Avira Internet Security 2013 90,0% 0,8%
SkyDNS 88,1% 0,9% Silver Parental Control AwardSilver Parental Control Award
Panda Internet Security 2013 87,9% 0,5%
Trend Micro Titanium Maximum Security 2013 86,1% 0,8%
F-Secure Internet Security 2013 87,0% 2,6% Bronze Parental Control AwardBronze Parental Control Award
Microsoft Windows Live Family Safety 82,3% 2,4%
McAfee Internet Security 11 80,1% 0,6%
Dr.Web Security Space 8.0 97,9% 5,1% Нет наград
Интернет Цензор 2.2 99,0% 73,0%
Bitdefender Internet Security 2013 - - Дисквалифицированы
Norton Internet Security 2013 + Norton Safety Minder - -
NetPolice - -

 

Лучшим по эффективности фильтрации на тестовой коллекции оказался KinderGate Parental Control, заблокировавший в общей сложности 98% нежелательных для детей сайтов. Совсем немного отстал от него Kaspersky Internet Security , заблокировавший 96,8%. Их уровень ложных срабатываний не превысил 0.8%. Эти два родительских контроля получают  награду Gold Parental Control Award.

Также награду Gold Parental Control Award получают ContentKeeper Express и Avira Internet Security, заблокировавшие свыше 90% нежелатальных сайтов и при этом их уровень ложных срабатываний также не превысил 0.8%.

Очень хорошую эффективность с результатами от 86% до 89%  и низким уровнем ложных срабатываний показал сервис SkyDNS, Panda Internet Security и Trend Micro Titanium Maximum, которые получают награду Silver Parental Control Award.

F-Secure Internet Security, Microsoft Windows Live Family Safety и McAfee Internet Security, заблокировавшие более 80% нежелательных сайтов и не допустившие более 3% ложных срабатываний, получают награду Bronze Parental Control Award.

Остальные решения «родительского контроля», увы, остались без наград. Двое из них – Dr.Web Security Space и Интернет Цензор могли бы рассчитывать на награды, если бы не большое количество ложных срабатываний.

В случае с Dr.Web Security Space множество ложных срабатываний было допущено в следствие неверной категоризации сайтов, когда ряд крупных сайтов (социальных сетей, блогосфер, видеохостингов и т.д.) попадают в категорию порнографии и блокируются полностью. Полная блокировка является осознанным решением производителя, однако, несмотря на сходство с подходом, который был впервые применён при решении проблемы знаменитого «гордиева узла», оно, скорее, вызывает недоумение пользователей.

Интернет Цензор, работающий по принципу белого списка, блокирует большинство легитимных сайтов из мировой ТОП-1000 по версии Alexa.com. Его уровень ложных срабатываний составил свыше 70%. Иными словами, вашему ребенку без веских на то причин будет отказано в посещении 7 из 10 вполне легитимных сайтов. Подобный подход в принципе нельзя назвать технологически зрелым. Очевидно разработчики решили пойти по пути наименьших затрат. Однако, даже при использовании ими жесткого подхода к фильтрации по белым спискам, добиться заявленного 100%-уровня фильтрации нежелательных сайтов так и не получилось.

Крайне неприятным сюрпризом теста в этом году стал сход с дистанции сразу трех испытуемых продуктов: Bitdefender Internet Security, NetPolice  и Norton Internet Security (Norton Safety Minder). Эти три продукта считаются дисквалифицированными.

В случае с Bitdefender тестированию помешала ошибка программы, не позволяющая корректно определить категорию блокируемого сайта. Сервисы от NetPolice и Norton оказались полностью неработоспособными. Тестировщикам в течение месяца не удалось загрузить с сайта дистрибутивы для теста, несмотря на уведомления производителей.

Мы всерьез надеемся, что их результаты данного теста положительно повлияют на производителей средств «родительского контроля», и такая важная тема, как защита детей в сети, не останется без должного внимания.

 

Анализ изменений в сравнении с предыдущими тестами

В заключение хотелось бы проанализировать результаты эффективности решений «родительского контроля» по сумме двух тестов за 2011-2012 годы. Для этого к результатам этого теста добавим результаты предыдущего теста, выполненного по той же базовой методологии.

Таким образом, можно проследить изменения в эффективности блокировки нежелательных для детей сайтов порнографической направленности (за исключением продуктов Bitdefender, Norton, NetPolice , Интернет Цензор, по ним нет данных за два года) - см. рисунки 6-7.

 

Рисунок 6: Динамика изменений эффективности решений «родительского контроля»

Динамика изменений эффективности решений «родительского контроля» 

 

Рисунок 7: Динамика изменений эффективности родительских контролей

Динамика изменений эффективности родительских контролей 

 

Как видно из рисунков 6-7, за прошедший год лишь некоторые вендоры сумели заметно улучшить эффективность своих технологий фильтрации нежелательного для детей контента. Положительную динамику продемонстрировали KinderGate, Dr.Web и Trend Micro. Остальные остались на том же уровне или ухудшили свои результаты.

Важно отметить хороший прогресс многих участников в уменьшении кол-ва ложных срабатываний. Особенно здесь выделяется Microsoft Windows Live Family Safety, чье количество ложных срабатываний стало в 2 раза меньше.

Если смотреть на изменение картины в целом, то выравнивания результатов больше не происходит. Производители, которые серьезно занимаются технологиями веб-фильтрации и категоризацией интернет-сайтов, держат планку высокого качества и, по возможности, улучшают результат. Другие же поддерживают среднюю эффективность своих продуктов, и не стараются подтягиваться вплотную к лидерам.

 

Комментарии к тесту

Илья Шабанов, управляющий партнер Anti-Malware.ru:

«Результаты теста родительских контролей в этом году свидетельствуют о наметившемся расслоении продуктов по условному классу качества фильтрации и уровню ложных срабатываний. С одном стороны, мы наблюдаем группу вендоров, которые постоянно поднимают планку качества и стремятся к классу защиты 99.9% при снижающемся до нуля уровне ложных срабатываний. С другой стороны, мы видим некоторую расслабленность других вендоров, для которых веб-фильтрация не является приоритетом разработки, кто довольствуется весьма средним результатам и не стремится стать лидером в данном технологическом сегменте.

Впервые за историю подобных тестов мы столкнулись с полностью неработающими и непригодными к использованию родительскими контролями. Для меня это сигнал, что с ростом внимания потребителей к проблеме защиты детей будет также возрастать получить за личные или государственные деньги не сервис, а «дырку от бублика» (Fake Parental Control), который может не только не обеспечит защиту от нежелательного контента, но и просто не заработает».

 

Михаил Касимов, эксперт Anti-Malware.ru:

«Представленные в тестировании продукты можно условно разделить на те, для работы которых требуется установка в системе некоторого клиентского программного обеспечения, а также те, которые требуют изменить либо настройки предоставления доступа в личном кабинете клиента провайдера, либо сменить DNS-сервер в сетевом подключении на альтернативный. Я считаю, что второй вариант с точки зрения нагрузки на систему и удобства настройки и использования более перспективным. Если говорить в целом по результатам, то среднее количество ложных срабатываний у продуктов не превышает нескольких процентов. При этом основная задача - защита детей от вредоносного контента - выполняется половиной продуктов. Если ребёнок не сможет открыть какой-либо условно хороший сайт, то ничего страшного в этом нет - ребёнок скажет об этом родителям, и они занесут этот сайт в исключения. Ложные срабатывания в родительском контроле менее критичны, чем низкий уровень детекта сайтов с опасным содержимым. В целом же средний детект опасных сайтов изменился не существенно, что говорит о том, что технологии блокировки нежелательных сайтов развиваются, учитывая то, что таких сайтов появляется в единицу времени всё больше, а технологии обхода фильтров становятся всё более технологичными. На сегодняшний день можно сказать, что продукты класса "Родительский контроль" оправдывают своё использование».

Валерий Ледовской, эксперт Anti-Malware.ru:

«Тема родительского контроля в настоящее время весьма актуальна. Особенно в связи с последними изменениями в законодательстве, связанными с блокировкой сайтов, содержащих информацию, которая может повредить детской психике. Независимые исследования показали, что применение государственного реестра запрещённых сайтов в настоящее время далеко от достижения цели защиты детей от нежелательного контента. В частности, провайдеры с опозданием и неполностью обновляют список блокировки. Таким образом, некоторые сайты, которые должны блокироваться, не блокируются, а сайты, с которых давно снята блокировка, остаются заблокированными. Провайдеры блокируют сайты по IP-адресам, т.к. не имеют технической возможности блокировать отдельные страницы сайтов. На этом фоне персональные продукты класса "Родительский контроль", судя по результатам представленного теста, выглядят гораздо более эффективными. Даже самый неэффективный в данном тестировании родительский контроль смотрится лучше, чем эффективность использования государственного реестра заблокированных сайтов. Более того, некоторые провайдеры предоставляют функционал родительского контроля по модели SaaS бесплатно или за небольшую плату. И семьи, имеющие детей, могут его использовать. Мне кажется, что данный тест - это не просто информация для пользователя, который хочет защитить детей от нежелательного контента на своём компьютере. Это очень важная информация для людей, которые принимают решения, влияющие на используемые методы защиты детей от нежелательного контента в Интернете в масштабах страны. У некоторых из представленных продуктов можно многому научиться».

 

Комментарии партнеров Anti-Malware.ru

Дмитрий Курашев, директор компании Entensys:

«В первую очередь хочу поблагодарить ресурс Anti-Malware.ru за само проведение такого теста. Это очень полезно для нас, производителей систем фильтрации. Мы постоянно совершенствуем точность и аккуратность работы нашего продукта и такие тесты, безусловно, помогают этому. Мне очень приятно, что наш KinderGate показал лучший результат среди всех участников, хотя, конечно, обидно, что до порога платиновой награды, которая ранее в рамках тестов решений «родительского контроля» еще никому не выдавалась, нам не хватило всего лишь 0.07% по ложному срабатыванию».


Олег Андрианов, старший менеджер по сертификации "Лаборатории Касперского":

«Вопрос о качестве защиты от нежелательного контента является чрезвычайно важным, и мы рады что информационно-аналитический центр Anti-Malware,ru регулярно проводит подобные исследования. Пользователям этого компонента особенно важно выбирать продукты с качественной защитой. Высокие результаты обнаружения и блокировки нежелательного контента показанные нашим продуктом в этом тесте наглядно показывают результат наших усилий по развитию технологий родительского контроля».

 

Владимир Дудченко, генеральный директор компании SoftBCom, являющейся дистрибьютором решений ContentKeeper в России:

«Опубликованные результаты тестов представляют собой итог уникальной по содержательности работы, уже третий год совершенно бесплатно, прямо-таки подвижнически выполняемой экспертами Anti-Malware.ru. Особенно ценны представленные данные и примененные методические наработки в нынешней ситуации, когда многие решения, даже на государственном уровне, принимаются без должной научной и технологической проработки, что называется «с наскока». Проведенные тесты проявили глубину и многогранность темы фильтрации, хотя охватили только одну, «порнографическую» компоненту этой проблемы.

Участвовавшее в тесте облачное решение ContentKeeper Express является одним из компонентов линейки ContentKeeper, способной удовлетворить потребности всех классов пользователей – от работающих на отдельных компьютерах дома или в небольших организациях (например, школах или библиотеках), до средних и крупных структур. Фильтрация трафика у интернет-провайдеров также входит в сферу применения ContentKeeper.

Результаты тестов наглядно подтвердили, что российская web-зона постоянно находится в зоне внимания разработчиков и служб поддержки ContentKeeper».

Дмитрий Вострецов, директор по маркетингу SkyDNS:

«Очень  жаль  видеть такие результаты, но наша система выстроена по 2-х уровневой   модели с использованием нашей собственной системы безопасного поиска, использование которой и доводит надежность фильтра до 100%. Что подтверждается многочисленными проверками прокуратур в школах, использующих наш фильтр».

Anti-Malware Яндекс ДзенПодписывайтесь на канал "Anti-Malware" в Telegram, чтобы первыми узнавать о новостях и наших эксклюзивных материалах по информационной безопасности.
Если вы являетесь производителем и хотели бы видеть свой продукт в списке протестированных по данной методологии или обновить его результаты, не дожидаясь нового планового теста, вы можете воспользоваться услугой индивидуального тестирования.