Независимая лаборатория AV-Comparatives, занимающаяся оценкой программных средств обеспечения безопасности, только что опубликовала отчет о результатах своих испытаний в отношении средств защиты потребителей в реальных условиях за февраль-май 2021 года.

Это испытание, частично финансируемое Австрийской Республикой, проводилось компанией AV-Comparatives при поддержке факультета информатики Инсбрукского университета.

В ходе тестирования средств защиты в реальных условиях испытывались следующие продукты, предназначенные для обеспечения безопасности потребителей: Avast Free Antivirus; AVG Free Antivirus; Avira Antivirus Pro; Bitdefender Internet Security; ESET Internet Security; G Data Total Security; K7 Total Security; Kaspersky Internet Security; McAfee Total Protection; NortonLifeLock Norton 360; Panda Free Antivirus; Total AV Total Security; Total Defense Essential Antivirus; Trend Micro Internet Security; VIPRE Advanced Security.

При тестировании средств защиты в реальных условиях, проводившихся лабораторией AV-Comparatives, имитировались реальные условия, являющиеся повседневными для пользователей. Для обнаружения вредоносных сайтов и выделения вредоносных URL-адресов с целью использования в данных испытаниях применялась разработанная компанией собственная система автоматического сбора информации. Тесты проводились с использованием полностью исправленной 64-разрядной операционной системы Microsoft Windows 10.

В результате испытаний точно устанавливалось, способен ли каждый из использованных вредоносных образцов вносить какие-либо изменения в испытуемую систему.

Соучредитель AV-Comparatives Питер Штельцхаммер (Peter Stelzhammer) прокомментировал это событие следующим образом: «При таком тестировании очень важно использовать достаточное количество тестовых сценариев (образцов). Если в сравнительных испытаниях используется лишь небольшой набор образцов, то их результаты могут неточно отражать защитные возможности протестированных продуктов. AV-Comparatives использует больше тестовых сценариев на каждый продукт и каждый месяц по сравнению с любой другой испытательной лабораторией, проводящей аналогичные тесты. Следовательно, наши тесты достигают очень высокого уровня статистической значимости».

Для группирования результатов и определения уровня сходства между кластерами использовались такие статистические методы как иерархический кластерный анализ. Для обеспечения того, чтобы программы безопасности не досаждали пользователям ложной тревогой, AV-Comparatives подвергает все продукты испытаниям на ложные срабатывания.

Программы с высокими уровнями ложных срабатываний получали более низкие оценки. Многие из продуктов, прошедших испытания, показали хорошие результаты, но высочайшего уровня оценки достиг только один. Однако, по утверждению представителей AV-Comparatives, к этому тесту применяются очень высокие стандарты, и даже продукты, получившие стандартную оценку, достигли надежного уровня защиты.