Comment nous testons et comparons les outils
Chaque note publiée sur Comparateur-Tech repose sur une grille de critères pondérés, publique et identique pour tous les outils d'une même catégorie. Cette page décrit ce que nous mesurons, comment nous le mesurons, et ce qui garantit l'indépendance de nos classements.
Dernière mise à jour :
Notre protocole en quatre étapes
Sélection
Nous choisissons les outils à tester selon leur pertinence pour nos lecteurs : parts de marché, demandes reçues, nouveautés notables. Aucun éditeur ne peut acheter sa place dans un comparatif.
Tests
Chaque outil est utilisé en conditions réelles : création de compte, configuration, mesures répétées sur plusieurs jours. Les critères mesurés dépendent de la catégorie (voir ci-dessous).
Notation pondérée
Les résultats sont convertis en note sur 10 selon une grille pondérée, publique et identique pour tous les outils d'une même catégorie. La note ne fait l'objet d'aucun ajustement commercial.
Réévaluation
Les prix, offres et performances évoluent. Nous réévaluons les comparatifs majeurs au minimum une fois par trimestre, et chaque page affiche sa date de dernière mise à jour.
Critères et pondérations par catégorie
Un VPN ne se note pas comme un hébergeur. Chaque catégorie possède sa propre grille ; les pondérations ci-dessous sont celles réellement utilisées pour calculer les notes affichées sur le site.
VPN
Un VPN se juge d'abord sur ce qu'il promet : protéger la connexion sans la ralentir excessivement. Nous mesurons la vitesse avant/après connexion, vérifions l'absence de fuites et analysons ce que l'éditeur peut réellement savoir de ses utilisateurs.
| Critère | Pondération | Ce que nous mesurons |
|---|---|---|
| Vitesse | 25 % | Débit descendant et montant avec/sans VPN, latence, stabilité sur plusieurs serveurs (France, Europe, États-Unis), mesures répétées à différents moments de la journée |
| Fuites DNS / IP / WebRTC | 25 % | Tests de fuite DNS, IPv4/IPv6 et WebRTC sur chaque application, comportement du kill switch en cas de coupure forcée de la connexion |
| Juridiction et politique no-log | 20 % | Pays d'immatriculation et lois applicables, contenu réel de la politique de confidentialité, existence d'audits indépendants publiés, antécédents (demandes judiciaires, incidents) |
| Fonctionnalités | 15 % | Kill switch, split tunneling, protocoles disponibles (WireGuard, OpenVPN), multi-hop, nombre d'appareils simultanés, qualité des applications |
| Tarifs | 15 % | Prix réel après la première période d'engagement, conditions de remboursement, transparence du renouvellement |
Hébergement web
Pour un hébergeur, les deux chiffres qui comptent sont la disponibilité et le temps de réponse. Nous les mesurons sur la durée avec un site témoin, plutôt que de reprendre les chiffres annoncés par l'hébergeur.
| Critère | Pondération | Ce que nous mesurons |
|---|---|---|
| Uptime | 25 % | Disponibilité mesurée sur un site témoin via un service de monitoring externe, sur une période d'au moins 30 jours, comparée à la garantie contractuelle (SLA) |
| TTFB et performance | 25 % | Time To First Byte mesuré depuis la France, temps de chargement complet d'une page type, comportement sous charge légère, présence de cache et de CDN |
| Support | 20 % | Temps de première réponse constaté (chat, ticket), disponibilité en français, pertinence technique des réponses à des questions réelles |
| Fonctionnalités et limites | 15 % | Sauvegardes automatiques, certificats SSL, nombre de sites et de bases de données, limites réelles des offres « illimitées », facilité de migration |
| Tarifs | 15 % | Prix de la première année et prix au renouvellement (souvent très différents), frais cachés, conditions de remboursement |
Antivirus
Nous ne disposons pas d'un laboratoire de virologie : pour le taux de détection, nous nous appuyons sur les résultats publiés par les laboratoires indépendants de référence (AV-TEST, AV-Comparatives), que nous croisons et complétons par nos propres mesures d'impact système et d'ergonomie.
| Critère | Pondération | Ce que nous mesurons |
|---|---|---|
| Taux de détection | 30 % | Résultats des derniers tests AV-TEST et AV-Comparatives (protection en conditions réelles et détection de malwares répandus), régularité des scores dans le temps |
| Impact système | 20 % | Ralentissement mesuré au démarrage, à l'ouverture d'applications et lors d'un scan complet, consommation mémoire au repos |
| Faux positifs | 15 % | Nombre de fausses alertes relevé par les laboratoires indépendants, comportement constaté avec des logiciels légitimes courants |
| Fonctionnalités | 20 % | Pare-feu, protection web et anti-phishing, protection ransomware, périmètre réel des modules annoncés (VPN inclus, gestionnaire de mots de passe) |
| Tarifs | 15 % | Prix de la première année et au renouvellement, nombre d'appareils couverts, pratiques commerciales (reconduction tacite, désabonnement) |
Outils IA
Les outils d'IA générative sont plus difficiles à noter objectivement : la qualité dépend de l'usage. Nous utilisons une série de tâches identiques pour tous les outils d'une même sous-catégorie et accordons un poids important à la confidentialité des données, souvent négligée dans ce secteur.
| Critère | Pondération | Ce que nous mesurons |
|---|---|---|
| Qualité des sorties | 30 % | Série de tâches types identiques pour tous les outils comparés (rédaction, code, image… selon la sous-catégorie), évaluées sur la fiabilité, la pertinence et la régularité des résultats |
| Tarifs et limites | 20 % | Prix des formules, quotas réels (requêtes, tokens, générations), différences concrètes entre offre gratuite et payante |
| Confidentialité des données | 20 % | Utilisation des données des utilisateurs pour l'entraînement, possibilité de refus (opt-out), localisation des données, conformité RGPD annoncée |
| Intégrations | 15 % | API disponible, connecteurs natifs, export des données, compatibilité avec les outils de travail courants |
| Prise en main | 15 % | Clarté de l'interface, courbe d'apprentissage, qualité de la documentation, disponibilité en français |
Notre indépendance
Comparateur-Tech est financé par l'affiliation : certains liens vers les sites des éditeurs nous rapportent une commission lorsqu'un lecteur souscrit une offre. Ce modèle nous permet de rester gratuits et sans publicité intrusive, mais il impose des règles strictes.
- Les classements ne sont jamais influencés par l'affiliation. Les notes sont calculées à partir de la grille pondérée avant toute considération commerciale, et un outil sans programme d'affiliation peut occuper la première place d'un comparatif.
- Aucun éditeur ne peut acheter une note, une position dans un classement ou la suppression d'une critique. Nous refusons les articles sponsorisés présentés comme des tests.
- Les liens d'affiliation sont signalés et balisés rel="sponsored" conformément aux recommandations de Google.
Le détail de notre financement est présenté sur la page À propos.
Matériel et conditions de test
Pour que les mesures soient comparables d'un outil à l'autre, tous les tests sont réalisés dans les mêmes conditions :
- Machine : [À COMPLÉTER : modèle, processeur, RAM, OS, ex. PC portable sous Windows 11, Ryzen 7, 16 Go]
- Connexion : [À COMPLÉTER : type et débit, ex. fibre 1 Gb/s symétrique, opérateur X]
- Localisation : [À COMPLÉTER : ville ou région de test, ex. tests réalisés depuis la France (région Auvergne-Rhône-Alpes)]
- Outils de mesure : [À COMPLÉTER : ex. Speedtest/nPerf pour les débits, ipleak.net et dnsleaktest.com pour les fuites, UptimeRobot pour le monitoring, WebPageTest pour le TTFB]
- Protocole : chaque mesure est répétée au moins trois fois à des moments différents de la journée ; nous retenons la médiane, pas le meilleur résultat.
Les limites de notre méthode
Aucune méthodologie n'est parfaite, et nous préférons être clairs sur les limites de la nôtre. Nos mesures reflètent nos conditions de test : vos débits VPN dépendront de votre connexion, et le TTFB d'un hébergeur varie selon la localisation des visiteurs. Une bonne note ne signifie pas qu'un outil convient à tout le monde, elle signifie qu'il tient ses promesses dans sa catégorie.
Les comparatifs majeurs sont réévalués au minimum chaque trimestre, et systématiquement lorsqu'un changement important survient (nouvelle tarification, incident de sécurité, audit publié). Chaque page affiche sa date de dernière mise à jour.
Vous avez repéré une erreur ou une information obsolète ? Signalez-la-nous : nous corrigeons et créditons les signalements pertinents.