Solutions de protection des
terminaux pour les entreprises Tests de performance
Windows 7
Septembre 2010
Document : Tests de performance des solutions de protection des terminaux pour les entreprises Auteurs : K. Lai, D. Wren, T. Rowling
Société : PassMark Software Date : 5 octobre 2010 Rapport : 1
Introduction
En septembre 2010, PassMark Software® a réalisé des tests de performance objectifs sur cinq solutions de protection des terminaux destinées aux entreprises sous Windows 7 Edition intégrale.
La note la plus élevée possible est de 70. La solution Symantec Endpoint Protection s'est positionnée à la première place avec une note de 54.
Nom du produit Note totale
Symantec Endpoint Protection 54 Kaspersky Business Space Security 44 Trend Micro OfficeScan 42 Sophos Endpoint Security 38 McAfee Total Protection for Endpoint 32
Cette note totale est une bonne indication du niveau de performance du produit par rapport aux autres produits testés. Chaque produit gagne des points selon son classement à chaque test.
Classement
au test Points gagnés
1 5
2 4
3 3
4 2
5 1
Les tests ont été réalisés sur tous les produits au moyen de 14 indicateurs de performance. Ces indicateurs sont les suivants :
Durée d'installation
Vitesse de démarrage
Durée d'une analyse à la demande
Durée d'une analyse planifiée
Taux moyen d'utilisation du processeur durant l'analyse
Durée de lancement de l'interface utilisateur
Temps d'ouverture d'un document Word
Durée de lancement d'Internet Explorer
Vitesse de navigation
Débit réseau
Copie, déplacement et suppression de fichiers
Quantité de mémoire utilisée pendant les périodes d'inactivité du système
Taux moyen d'utilisation du processeur pendant les périodes d'inactivité
Sommaire
INTRODUCTION ... 2
SOMMAIRE ... 4
HISTORIQUE DES RÉVISIONS ... 6
PRODUITS ET VERSIONS ... 7
RÉSUMÉ DES INDICATEURS DE PERFORMANCE ... 8
RÉSULTATS DES TESTS ... 11
TEST 1-DURÉE D'INSTALLATION (SECONDES) ... 11
11 TEST 2-DURÉE DE LANCEMENT DE L'INTERFACE UTILISATEUR (MILLISECONDES) ... 11
TEST 3-TEMPS D'OUVERTURE D'UN DOCUMENT WORD (MILLISECONDES) ... 12
TEST 4-DURÉE DE LANCEMENT D'INTERNET EXPLORER (SECONDES) ... 12
TEST 5-VITESSE DE DÉMARRAGE (SECONDES) ... 13
TEST 6-DURÉE D'UNE ANALYSE À LA DEMANDE (SECONDES) ... 13
TEST 7-DURÉE D'UNE ANALYSE PLANIFIÉE (SECONDES) ... 14
TEST 8-TAUX MOYEN D'UTILISATION DU PROCESSEUR DURANT L'ANALYSE (POURCENTAGE)... 14
TEST 10-DÉBIT RÉSEAU (SECONDES) ... 16
TEST 11-COPIE, DÉPLACEMENT ET SUPPRESSION DE FICHIERS (SECONDES) ... 17
TEST 12-COMPRESSION ET DÉCOMPRESSION DE FICHIERS (SECONDES) ... 17
TEST 13-QUANTITÉ DE MÉMOIRE UTILISÉE PENDANT LES PÉRIODES D'INACTIVITÉ DU SYSTÈME (MÉGA-OCTETS) ... 18
TEST 14-TAUX MOYEN D'UTILISATION DU PROCESSEUR PENDANT LES PÉRIODES D'INACTIVITÉ (POURCENTAGE) ... 18
EXCLUSION DE RESPONSABILITÉ ET DIVULGATION ... 19
COORDONNÉES ... 19
ANNEXE 1 - ENVIRONNEMENT DE TEST... 20
SYSTÈME DE TERMINAUX WINDOWS 7(64 BITS) ... 20
SERVEUR WEB ET DE FICHIERS ... 20
SERVEUR ACTIVE DIRECTORY... 20
ANNEXE 2 – DESCRIPTION DE LA MÉTHODOLOGIE ... 21
Historique des révisions
Rév. Historique des révisions Date
Rapport
1 Version initiale de ce rapport 27 septembre 2010
Produits et versions
Dans ce rapport, nous avons testé ou inclus les versions suivantes des logiciels de protection des terminaux1 :
1 Tous les produits ont été testés avec leurs paramètres par défaut.
2 La fonction IPS (système de prévention d'intrusion) est activée par défaut dans Symantec Endpoint Protection.
Fabricant Nom du produit Année de
lancement
Version du produit Symantec Endpoint Protection2 2010 11.0.6100.645
McAfee Total Protection for Endpoint 2010 4.5.1
Trend Micro OfficeScan 2010 10.5.1083
Sophos Endpoint Security 2010 9.5
Kaspersky Business Space Security 2010 6.0.4.1424
Résumé des indicateurs de performance
Nous avons sélectionné un ensemble d'indicateurs objectifs qui reflètent de façon exhaustive et réaliste les domaines dans lesquels les produits de protection des terminaux peuvent avoir un impact sur les performances du système pour les utilisateurs. Nos indicateurs testent l'impact des logiciels sur les tâches courantes que les utilisateurs peuvent être amenés à réaliser au quotidien.
Toutes les méthodes de test de PassMark Software peuvent être reproduites par des tiers en utilisant le même environnement pour obtenir des résultats similaires. Une description détaillée des méthodes employées dans nos tests est disponible dans l'Annexe 2 – Description de la méthodologie de ce rapport.
Test 1 - Durée d'installation
Ce test mesure la durée d'installation minimum requise pour que le logiciel soit totalement opérationnel. Plus la durée d'installation est courte, plus le produit est rapide à installer par l'utilisateur.
Test 2 - Durée de lancement de l'interface utilisateur
Ce test indique de façon objective la réactivité d'un produit de sécurité pour l'utilisateur. Il mesure le temps nécessaire au lancement de l'interface utilisateur du logiciel de protection des terminaux à partir de Windows.
Pour prendre en compte les effets de la mise en mémoire cache par le système d'exploitation, ce test mesure la durée du lancement initial et la durée des lancements suivants. Le résultat final est une moyenne de ces deux mesures.
Test 3 - Temps d'ouverture d'un document Word
La durée moyenne du lancement de l'interface Word a été calculée au moyen de l'outil AppTimer. Cette mesure englobe le temps nécessaire pour lancer l'application Word 2007 et ouvrir un document de 10 Mo. Ce test est pratiquement identique au test sur la durée de lancement de l'interface utilisateur. Pour chaque produit testé, nous avons obtenu un total de 15 échantillons issus de cinq séries de trois lancements de Word, avec un redémarrage avant chaque série pour annuler les effets de la mise en mémoire cache par le système d'exploitation. Lors de la compilation des résultats, nous avons séparé le premier lancement de chaque série de manière à obtenir un ensemble de valeurs pour le lancement initial après le redémarrage et un ensemble de valeurs pour les lancements suivants.
Nous avons fait la moyenne des durées des lancements suivants afin d'obtenir un temps moyen pour les lancements suivants. Le résultat final de ce test est une moyenne entre le temps de lancement initial et le temps moyen des lancements suivants.
Test 4 - Durée de lancement d'Internet Explorer
Ce test est l'une des nombreuses méthodes permettant de calculer objectivement l'impact d'un produit sur la réactivité du système. Il mesure le temps nécessaire pour lancer l'interface utilisateur d'Internet Explorer 8.
Pour prendre en compte les effets de la mise en mémoire cache par le système d'exploitation, ce test mesure la durée du lancement initial et la durée des lancements suivants. Le résultat final est une moyenne de ces deux mesures.
Test 5 - Vitesse de démarrage
Ce test mesure le temps nécessaire au chargement du système d'exploitation sur l'ordinateur. Le logiciel de sécurité se lance généralement au démarrage de Windows, ce qui augmente la durée et retarde le démarrage du système d'exploitation. Des temps de démarrage plus courts indiquent que l'application a eu moins d'impact sur le fonctionnement normal de la machine.
Test 6 - Durée d'une analyse à la demande
Toutes les solutions de protection des terminaux comprennent des fonctionnalités conçues pour détecter les virus et autres formes de programmes malveillants grâce à une analyse des fichiers sur le système. Ce test mesure le temps nécessaire pour analyser un ensemble de fichiers sains. Notre échantillon de 5,42 Go était constitué de fichiers habituellement présents sur les ordinateurs des utilisateurs (fichiers multimédias, fichiers système et documents Microsoft Office).
Test 7 - Durée d'une analyse planifiée
Le test est effectué sur une copie des fichiers de test utilisés dans la section Test 6 - Durée d'une analyse à la demande ci-dessus. En revanche, l'analyse est programmée pour une heure précise par le biais de l'interface utilisateur du client, ou au moyen de la console de gestion en l'absence de cette option sur le client.
Test 8 - Taux moyen d'utilisation du processeur durant l'analyse
Ce test mesure le taux d'utilisation du processeur durant l'exécution d'une analyse.
Test 9 - Vitesse de navigation
Il est courant que les logiciels de protection des terminaux analysent les données à la recherche de programmes malveillants au moment de leur téléchargement à partir d'Internet ou d'un intranet. Ce comportement peut avoir un impact négatif sur la vitesse de navigation au moment où les produits analysent le contenu Web pour détecter les éventuels programmes malveillants. Ce test mesure le temps nécessaire pour charger successivement une série de sites Internet populaires dans la fenêtre du navigateur d'un utilisateur à partir d'un serveur local.
Test 10 - Débit réseau
Ce test mesure le temps nécessaire pour télécharger divers fichiers à partir d'un serveur local par HTTP (Hypertext Transfer Protocol), qui est le principal protocole utilisé sur le Web pour la navigation, la création de liens et le transfert de données. Les fichiers utilisés dans ce test sont dans des formats couramment téléchargés depuis le Web par les utilisateurs : images, archives, morceaux de musique et films.
Test 11 - Copie, déplacement et suppression de fichiers
Ce test mesure le temps nécessaire pour déplacer, copier et supprimer un échantillon de fichiers. Cet échantillon comprend plusieurs types de formats de fichiers qu'un utilisateur de Windows manipule au quotidien. Il s'agit de documents (documents Microsoft Office, PDF Adobe, fichiers ZIP, etc.), de fichiers multimédias (images, films, morceaux de musique, etc.), ainsi que de fichiers système (fichiers exécutables, bibliothèques, etc.).
Test 12 - Compression et décompression de fichiers
Ce test mesure le temps nécessaire pour compresser et décompresser différents types de fichiers. Les formats de fichiers utilisés dans ce test comprennent des documents, des films et des images.
Test 13 - Quantité de mémoire utilisée pendant les périodes d'inactivité du système
Ce test mesure la quantité de mémoire (RAM) utilisée par le produit alors que l'ordinateur et le logiciel de protection des terminaux sont inactifs. Nous avons calculé la quantité totale de mémoire utilisée en identifiant tous les processus du logiciel de protection des terminaux et la quantité de mémoire utilisée par chacun des processus.
La quantité de mémoire utilisée alors que l'ordinateur est inactif est un bon indicateur de la quantité de ressources système consommées par le logiciel de protection des terminaux sur une base permanente. Les produits plus performants occupent moins de mémoire lorsque l'ordinateur est inactif.
Test 14 - Taux moyen d'utilisation du processeur pendant les périodes d'inactivité
Ce test mesure le taux d'utilisation du processeur lorsque le système et le produit sont tous deux inactifs.
Résultats des tests
Test 1 - Durée d'installation (secondes)
Le graphique ci-dessous compare la durée d'installation minimum requise pour que les produits soient totalement opérationnels. Les produits dont l'installation est la plus rapide sont considérés comme les plus performants dans cette catégorie.
Test 2 - Durée de lancement de l'interface utilisateur (millisecondes)
Le graphique ci-dessous compare la durée moyenne du lancement de l'interface utilisateur des produits. Les produits affichant les temps de lancement les plus courts sont considérés comme les plus performants dans cette catégorie.
Test 3 - Temps d'ouverture d'un document Word (millisecondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour lancer Microsoft Word et ouvrir un document de 10 Mo. Les produits affichant les temps de lancement les plus courts sont considérés comme les plus performants dans cette catégorie.
Test 4 - Durée de lancement d'Internet Explorer (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour charger Internet Explorer. Les produits affichant les temps de chargement les plus courts sont considérés comme les plus performants dans cette catégorie.
Test 5 - Vitesse de démarrage (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire au démarrage du système (à partir d'un échantillon de cinq démarrages) pour chaque produit testé. Les produits affichant les vitesses de démarrage les plus élevées sont considérés comme les plus performants dans cette catégorie.
Test 6 - Durée d'une analyse à la demande (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour analyser un ensemble de fichiers multimédias, fichiers système et documents Microsoft Office totalisant 5,42 Go. Pour calculer ce temps, nous faisons la moyenne de la durée de l'analyse initiale (cycle 1) et de la durée des analyses suivantes (cycles 2 à 5).
Les produits affichant les durées d'analyse les plus courtes sont considérés comme les plus performants dans cette catégorie.
Test 7 - Durée d'une analyse planifiée (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour analyser un ensemble de fichiers multimédias, fichiers système et documents Microsoft Office totalisant 5,42 Go. Pour calculer ce temps, nous faisons la moyenne de la durée de l'analyse initiale (cycle 1) et de la durée des analyses suivantes (cycles 2 à 5).
Les produits affichant les durées d'analyse les plus courtes sont considérés comme les plus performants dans cette catégorie.
*Nous n'avons aucun résultat pour le logiciel Sophos Endpoint Security dans ce test car il ne propose aucune option permettant de planifier l'analyse d'un dossier spécifique.
Test 8 - Taux moyen d'utilisation du processeur durant l'analyse (pourcentage)
Le graphique ci-dessous compare le taux moyen d'utilisation du processeur durant l'analyse d'un ensemble de fichiers multimédias, fichiers système et documents Microsoft Office totalisant 5,42 Go. Pour calculer cette valeur, nous faisons la moyenne du taux d'utilisation du processeur pendant le cycle initial (cycle 1) et pendant les cycles suivants (cycles 2 à 5). Les produits affichant le taux d'utilisation le plus bas sont considérés comme les plus performants dans cette catégorie.
Test 9 - Vitesse de navigation
Le graphique ci-dessous compare le temps moyen nécessaire pour qu'Internet Explorer charge successivement une série de sites Web populaires via le réseau local à partir d'un serveur local. Les produits affichant les vitesses de navigation les plus élevées sont considérés comme les plus performants dans cette catégorie.
Test 10 - Débit réseau (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour télécharger un échantillon de fichiers de types courants pour chaque produit testé. Les produits affichant les temps les plus courts sont considérés comme les plus performants dans cette catégorie.
Test 11 - Copie, déplacement et suppression de fichiers (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour copier, déplacer et supprimer plusieurs ensembles de fichiers pour chaque produit testé. Les produits affichant les temps les plus courts sont considérés comme les plus performants dans cette catégorie.
Test 12 - Compression et décompression de fichiers (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour compresser et décompresser un échantillon de fichiers pour chaque produit testé. Les produits affichant les temps les plus courts sont considérés comme les plus performants dans cette catégorie.
Test 13 - Quantité de mémoire utilisée pendant les périodes d'inactivité du système (méga-octets)
Le graphique ci-dessous compare la quantité moyenne de RAM utilisée par chaque produit durant une période d'inactivité du système. Cette moyenne provient d'un échantillon de dix instantanés de mémoire pris séparément toutes les 60 secondes environ après le redémarrage. Les produits utilisant le moins de mémoire RAM en période d'inactivité sont considérés comme les plus performants dans cette catégorie.
Test 14 - Taux moyen d'utilisation du processeur pendant les périodes d'inactivité (pourcentage)
Le graphique ci-dessous compare le taux moyen d'utilisation du processeur pendant les périodes d'inactivité du système. Pour calculer cette valeur, nous faisons la moyenne du taux d'utilisation du processeur pendant le cycle initial (cycle 1) et pendant les cycles suivants (cycles 2 à 5). Les produits affichant le taux d'utilisation le plus bas sont considérés comme les plus performants dans cette catégorie.
Exclusion de responsabilité et divulgation
Ce rapport couvre uniquement les versions de produits disponibles au moment des tests. Les versions testées sont celles indiquées dans la section "Produits et versions" du présent rapport. Les produits que nous avons testés ne constituent pas une liste exhaustive de tous les produits disponibles dans ce segment de marché très concurrentiel.
Exclusion de responsabilité
En dépit de tous ses efforts pour garantir l'exactitude des informations présentées dans ce rapport, PassMark Software Pty Ltd décline toute responsabilité concernant les erreurs, omissions ou informations obsolètes pouvant subsister, et ne saurait en aucun cas être tenue pour responsable des dommages directs, indirects, accessoires, consécutifs ou punitifs résultant de la disponibilité, de l'utilisation ou de la consultation de ces informations ou de l'incapacité à les utiliser.
Divulgation
Symantec Corporation a financé l'élaboration de ce rapport et a fourni certains des scripts utilisés pour les tests.
Marques commerciales
Toutes les marques commerciales sont la propriété de leurs détenteurs respectifs.
Coordonnées
PassMark Software Pty Ltd Suite 202, Level 2
35 Buckingham St.
Surry Hills, 2010 Sydney, Australie
Téléphone + 61 (2) 9690 0444 Fax + 61 (2) 9690 0445
Site Web www.passmark.com
Téléchargement
Une copie électronique de ce rapport est disponible à la page suivante : http://www.passmark.com/avreport
Annexe 1 - Environnement de test
Dans le cadre de sa procédure de test, PassMark Software a utilisé un environnement de test sous Windows 7 Edition intégrale (64 bits) avec la configuration matérielle suivante :
Système de terminaux Windows 7 (64 bits)
Processeur : Intel Core i5 750 à 2,66 GHz Carte vidéo : ATI Radeon 4350 1 Go Carte mère : ASUS V-P7H55E, LGA1156
RAM : 4 Go DDR3, 1 333 Mhz
Disque dur : Samsung 1,5 To 7200RPM Réseau : Gigabit (1 Go/s)
Serveur Web et de fichiers
Le serveur n'est pas testé directement. Mais il sert à présenter les pages Web et les fichiers utilisés durant les tests sur les terminaux.
Processeur : Pentium 4 3 200 MHz Carte vidéo : Integrated Video Carte mère : Intel D865PERL
RAM : 1 Go
Disque dur : Seagate ST380023AS 80 Go Réseau : Gigabit (1 Go/s)
Serveur Active Directory
Le serveur n'est pas testé. Mais il sert à faciliter le déploiement à distance de certains produits sur les terminaux.
Processeur : Dual Xeon 3,4 Ghz Carte vidéo : RADEON X600 PRO Carte mère : HP 08B4h
RAM : 2 Go Registered ECC Infineon
Disque dur : 74 GO 10K, WD740GD-50FLA2 (Raptor) Réseau : Gigabit (1 Go/s)
Serveur de la console de gestion AV
Le serveur n'est pas testé. Mais il est nécessaire pour le déploiement des logiciels et la planification des analyses de programmes malveillants. Des machines virtuelles sont utilisées pour les consoles de gestion de chaque produit.
Processeur : AMD Phenom II x4 940 (Quad Core) Carte vidéo : ASUS GeForce 9400GT
Carte mère : Gigabyte GA-MA790XT-UD4P RAM : 16 Go PC3-10600 1 333 MHz DDR3
Disque dur : Western Digital Caviar Green WD10EADS 1 TO Serial ATA-II Réseau : Gigabit (1 Go/s)
Annexe 2 – Description de la méthodologie
Création de l'image Windows 7
Comme pour les tests sous Windows Vista, nous avons utilisé Norton Ghost pour créer une image de base
"saine" avant les tests. Notre objectif est de créer une image de base occupant le moins de place possible et de réduire les risques de variation engendrés par des facteurs externes du système d'exploitation.
Nous avons restauré l'image de base avant de tester chacun des produits. Grâce à cette procédure, nous sommes sûrs d'installer et de tester tous les produits sur la même machine "saine".
Les étapes de création de l'image de base de Windows 7 sont les suivantes : 1. Installation et activation de Windows 7 Edition intégrale
2. Désactivation des mises à jour automatiques
3. Changement des paramètres de contrôle des comptes utilisateur en "Ne jamais notifier"
4. Désactivation des analyses automatiques de Windows Defender pour éviter toute activité inattendue en arrière-plan
5. Désactivation du pare-feu Windows pour éviter toute interférence avec le logiciel de sécurité 6. Installation de Norton Ghost pour la création de l'image
7. Désactivation de Superfetch pour garantir des résultats cohérents 8. Installation de HTTP Watch pour tester les vitesses de navigation
9. Installation de Windows Performance Toolkit x64 pour tester les vitesses de démarrage 10. Installation de l'application Active Perl pour l'interprétation de certains scripts de test
11. Désactivation des mises à jour, des accélérateurs et des mises à jour d'affichage de compatibilité dans Internet Explorer 8
12. Création d'une image de base au moyen de Norton Ghost
Test 1 - Durée d'installation
Ce test mesure la durée d'installation minimum requise pour que le logiciel soit totalement opérationnel. La durée d'installation se décompose généralement en trois phases majeures :
Dans la mesure du possible, l'installation s'effectue par un déploiement à distance. Si cela n'est pas possible, nous procédons à une installation locale. Chaque étape de la procédure d'installation a été minutée manuellement à l'aide d'un chronomètre et consignée avec le plus de détails possible. Lorsque l'utilisateur devait saisir des données, le chronomètre a été mis en pause et l'intervention notée dans les résultats bruts entre parenthèses après la description de la phase.
Dans la mesure du possible, nous avons refusé ou ignoré toutes les demandes d'analyse avant ou après l'installation. Lorsqu'il nous était impossible d'ignorer une analyse, nous avons inclus la durée de l'analyse dans la durée d'installation. Lorsqu'un composant facultatif de l'installation représentait une fonctionnalité valable du logiciel, nous l'avons également installé (par exemple, outil de contrôle des liens vers les sites Web en tant que partie intégrante d'un produit de sécurité des terminaux).
La durée d'installation comprend le temps nécessaire au programme d'installation du produit pour télécharger les composants requis dans l'installation. Cela peut concerner les mises à jour obligatoires ou le transfert de l'application elle-même à partir d'un téléchargement.
Nous avons exclu les durées d'activation des produits en raison des variations dans les temps de réponse des serveurs des fournisseurs ou dans la durée nécessaire à la création des comptes.
Test 2 - Durée de lancement de l'interface utilisateur
La durée du lancement de l'interface utilisateur d'un produit a été calculée grâce à AppTimer (v1.0.1008). Pour chaque produit testé, nous avons obtenu un total de 15 échantillons issus de cinq séries de trois lancements de l'interface utilisateur, avec un redémarrage avant chaque série pour annuler les effets de la mise en mémoire cache par le système d'exploitation. Lors de la compilation des résultats, nous avons séparé le premier lancement de chaque série de manière à obtenir un ensemble de valeurs pour le lancement initial après le redémarrage et un ensemble de valeurs pour les lancements suivants.
Nous avons fait la moyenne des durées des lancements suivants afin d'obtenir un temps moyen pour les lancements suivants. Le résultat final de ce test est une moyenne entre le temps de lancement initial et le temps moyen des lancements suivants.
L'application AppTimer est disponible sur le site Web de PassMark.
Test 3 - Temps d'ouverture d'un document Word
La durée moyenne du lancement de l'interface Word a été calculée au moyen de l'outil AppTimer. Cette mesure englobe le temps nécessaire pour lancer l'application Word 2007 et ouvrir un document de 10 Mo. Ce test est pratiquement identique au test sur la durée de lancement de l'interface utilisateur. Pour chaque produit testé, nous avons obtenu un total de 15 échantillons issus de cinq séries de trois lancements de Word, avec un redémarrage avant chaque série pour annuler les effets de la mise en mémoire cache par le système d'exploitation. Lors de la compilation des résultats, nous avons séparé le premier lancement de chaque série de manière à obtenir un ensemble de valeurs pour le lancement initial après le redémarrage et un ensemble de valeurs pour les lancements suivants.
Nous avons fait la moyenne des durées des lancements suivants afin d'obtenir un temps moyen pour les lancements suivants. Le résultat final de ce test est une moyenne entre le temps de lancement initial et le temps moyen des lancements suivants.
Test 4 - Durée de lancement d'Internet Explorer
La durée moyenne du lancement de l'interface Internet Explorer a été calculée au moyen de l'outil AppTimer.
Ce test est pratiquement identique au test sur la durée de lancement de l'interface utilisateur. Pour chaque produit testé, nous avons obtenu un total de 15 échantillons issus de cinq séries de trois lancements d'Internet Explorer, avec un redémarrage avant chaque série pour annuler les effets de la mise en mémoire cache par le système d'exploitation. Lors de la compilation des résultats, nous avons séparé le premier lancement de chaque série de manière à obtenir un ensemble de valeurs pour le lancement initial après le redémarrage et un ensemble de valeurs pour les lancements suivants.
Pour ce test, nous avons utilisé Internet Explorer 8 (version 8.0.6001.18783) comme navigateur de test.
Nous avons fait la moyenne des durées des lancements suivants afin d'obtenir un temps moyen pour les lancements suivants. Le résultat final de ce test est une moyenne entre le temps de lancement initial et le
Test 5 - Vitesse de démarrage
PassMark Software utilise les outils disponibles dans le Windows Performance Toolkit version 4.6 (qui fait partie du SDK Microsoft Windows 7 disponible sur le site Web de Microsoft) de manière à obtenir des résultats plus précis et plus cohérents sur la plate-forme Windows 7.
Le processus de démarrage est tout d'abord optimisé avec xbootmgr.exe au moyen de la commande
"xbootmgr.exe -trace boot –prepSystem" qui prépare le système pour le test sur six démarrages d'optimisation. Les traces de démarrage obtenues avec le processus d'optimisation sont effacées.
Après l'optimisation du démarrage, le test est réalisé au moyen de la commande "xbootmgr.exe -trace boot - numruns 5". Cette commande démarre le système cinq fois de suite, avec des traces de démarrage détaillées pour chaque cycle.
Enfin, nous utilisons un outil de post-traitement pour analyser les traces de démarrage et obtenir la valeur BootTimeViaPostBoot . Cette valeur reflète le temps nécessaire au système pour finaliser tous les processus de démarrage (uniquement). Le résultat final est la moyenne des cinq traces de démarrage.
Test 6 - Durée d'une analyse à la demande
La durée d'analyse correspond au temps nécessaire à chaque produit pour analyser un échantillon de fichiers.
L'échantillon utilisé était identique dans tous les cas et comprenait une combinaison de fichiers système et de documents Office. Nous avons utilisé 8 502 fichiers représentant 5,42 Go au total. La plupart de ces fichiers étaient issus des dossiers système Windows. Etant donné que le type de fichier peut influencer la vitesse d'analyse, voici le détail des principaux types de fichiers, du nombre de fichiers et de la taille totale des fichiers de l'échantillon.
.avi 247 1 024 Mo .dll 773 25 Mo .exe 730 198 Mo .gif 681 63 Mo .doc 160 60 Mo .docx 267 81 Mo
.jpg 2904 318 Mo .mp3 333 2 048 Mo .png 451 27 Mo .ppt 97 148 Mo .sys 501 80 Mo .wav 430 260 Mo
.wma 585 925 Mo .xls 329 126 Mo
.zip 14 177 Mo
Dans la mesure du possible, nous avons exécuté cette analyse sans lancer l'interface utilisateur du produit, en cliquant avec le bouton droit de la souris sur le dossier de test et en sélectionnant l'option Analyser maintenant, bien que certains produits exigent le lancement de l'interface utilisateur pour analyser un dossier. Pour enregistrer la durée de l'analyse, nous avons utilisé le minuteur ou le système de reporting intégré au produit.
Lorsque cela était impossible, nous avons minuté les temps d'analyse manuellement à l'aide d'un chronomètre.
Pour chaque produit, nous avons pris cinq échantillons avec un redémarrage de la machine avant chaque cycle afin d'annuler les effets de la mise en mémoire cache par le système d'exploitation.
Nous avons ensuite fait la moyenne des temps des quatre analyses suivantes pour obtenir une durée moyenne pour les analyses suivantes. Le résultat final de ce test est une moyenne entre la durée de l'analyse initiale et la durée moyenne des analyses suivantes.
Test 7 - Durée d'une analyse planifiée
L'ensemble de données utilisé était une copie des fichiers du test Durée d'une analyse à la demande (ci-dessus), mais le lancement de l'analyse a été programmé à partir de l'interface utilisateur. Lorsque cette option n'était pas disponible, nous avons programmé l'analyse à partir de la console de gestion (dans la mesure du possible).
Test 8 - Taux moyen d'utilisation du processeur durant l'analyse
Nous utilisons l'outil CPUAvg pour ce test. Le système fait l'objet d'un démarrage minimal et passe dans un état inactif (environ 5 minutes après le démarrage). Une analyse antivirus est effectuée sur une série prédéfinie de fichiers tandis que l'outil CPUAvg est exécuté pendant toute la durée de l'analyse.
Test 9 - Vitesse de navigation
Nous avons utilisé un script conjointement avec l'application HTTPWatch (Edition de base, version 6.1) pour enregistrer le temps nécessaire au chargement successif d'une série de106 sites Web populaires à partir d'un serveur local. Ce script alimente une liste d'URL dans HTTPWatch, qui donne au navigateur l'instruction de charger les pages de façon séquentielle et suit le laps de temps nécessaire au navigateur pour charger tous les éléments sur une seule page.
Pour ce test, nous avons utilisé le navigateur Internet Explorer 8 (version 8.0.6001.18783).
La série de sites Web utilisés dans ce test inclut les premières pages de sites à fort trafic. Il s'agit de sites commerciaux, de réseaux sociaux, de sites d'informations, de sites financiers et de sites Web de référence.
Le test Vitesse de navigation est exécuté cinq fois et le résultat final est une moyenne de ces cinq échantillons.
Nous redémarrons le serveur local avant de changer de produit et réalisons un essai initial.
Test 10 - Débit réseau
Ce test mesure le temps nécessaire pour télécharger un échantillon de fichiers binaires de différentes tailles et de différents types sur une connexion réseau de 100 Mo/s. Les fichiers étaient hébergés sur un serveur sous Windows Server 2008 et IIS 7. Nous avons utilisé CommandTimer.exe conjointement avec GNU Wget (version 1.10.1) pour chronométrer et réaliser le test de téléchargement.
L'échantillon complet était composé de 484 fichiers d'une taille totale de 553 638 694 octets et de deux catégories de fichiers : fichiers multimédias [74 % du total] et documents [26 % du total]. Le détail des types de fichiers, du nombre de fichiers et de la taille totale des fichiers de l'échantillon est présenté dans le tableau ci- dessous :
Format de fichier
Catégorie Nombre Taille (octets)
JPEG Multimédia 343 30 668 312
GIF Multimédia 9 360 349
PNG Multimédia 5 494 780
MOV Multimédia 7 57 360 371
RM Multimédia 1 5 658 646
Format de fichier
Catégorie Nombre Taille (octets)
WMV Multimédia 5 46 126 167
MP3 Multimédia 28 191 580 387 PDF Documents 73 136 298 049
ZIP Documents 4 6 295 987
7Z Documents 1 92 238
Total 484 9877
Ce test a été réalisé cinq fois pour obtenir la durée moyenne de téléchargement de cet échantillon de fichiers, avec un redémarrage de la machine de test entre chaque cycle pour annuler les éventuels effets de mise en cache.
Test 11 - Copie, déplacement et suppression de fichiers
Ce test mesure le temps nécessaire au système pour copier, déplacer et supprimer un échantillon de fichiers de différents formats. Cet échantillon était constitué de 809 fichiers représentant 683 410 115 octets au total et pouvant être catégorisés en documents [28 % du total], fichiers multimédias [60 % du total] et fichiers PE (c'est- à-dire des fichiers système) [12 % du total].
Ce test a été réalisé cinq fois pour obtenir la durée moyenne de copie, de déplacement et de suppression des fichiers de l'échantillon, avec un redémarrage de la machine de test entre chaque cycle pour annuler les éventuels effets de mise en cache.
Test 12 - Compression et décompression de fichiers
Ce test mesure le temps nécessaire pour compresser et décompresser un échantillon de fichiers. Pour ce test, nous avons utilisé un sous-ensemble des fichiers multimédias et des documents employés dans le test Copie, déplacement et suppression de fichiers. CommandTimer.exe a enregistré le temps nécessaire à l'outil 7zip.exe pour compresser les fichiers en un fichier *.zip, puis pour décompresser le fichier *.zip ainsi créé.
Ce sous-ensemble était constitué de 404 fichiers d'une taille totale de 277 346 661 octets. Le détail des types de fichiers, du nombre de fichiers et de la taille totale des fichiers de l'échantillon est présenté dans le tableau ci- dessous :
Format de fichier
Catégorie Nombre Taille (octets)
DOC Documents 8 30 450 176
DOCX Documents 4 13 522 409
PPT Documents 3 5 769 216
PPTX Documents 3 4 146 421
XLS Documents 4 2 660 352
XLSX Documents 4 1 426 054
JPG Multimédia 351 31 375 259
GIF Multimédia 6 148 182
MOV Multimédia 7 57 360 371
RM Multimédia 1 5 658 646
AVI Multimédia 8 78 703 408
WMV Multimédia 5 46 126 167
Total 404 277 346 661
Ce test a été réalisé cinq fois pour obtenir la vitesse moyenne de compression et de décompression des fichiers, avec un redémarrage de la machine de test entre chaque cycle pour annuler les éventuels effets de mise en cache.
Test 13 - Quantité de mémoire utilisée pendant les périodes d'inactivité du système
L'utilitaire Perflog++ a servi à enregistrer la quantité de mémoire utilisée par les processus système au démarrage, puis toutes les minutes pendant 15 autres minutes. Nous avons suivi cette procédure une seule fois pour chaque produit et obtenu un total de 15 échantillons. Nous avons éliminé le premier échantillon pris au moment du démarrage.
L'utilitaire PerfLog++ enregistre la quantité de mémoire utilisée par tous les processus, et pas seulement par les processus du produit de protection contre les programmes malveillants. Par conséquent, les processus du produit ont dû être isolés de tous les autres processus système actifs. Pour les isoler, nous avons utilisé un programme appelé Process Explorer, exécuté immédiatement après l'enregistrement de la quantité de mémoire utilisée par PerfLog++. Process Explorer est un logiciel Microsoft Windows Sysinternals qui affiche la liste des processus DLL actuellement chargés sur le système.
Test 14 - Taux moyen d'utilisation du processeur pendant les périodes d'inactivité
Nous utilisons l'outil CPUAvg pour ce test. Le système fait l'objet d'un démarrage minimal et passe dans un état inactif (environ 5 minutes après le démarrage). CPUAvg est ensuite exécuté pendant 5 minutes alors que le système est inactif.
.
