Aller au contenu principal

Notre méthode

Nous ne testons pas les produits nous-mêmes. Nous rassemblons tout ce qui a déjà été mesuré, écrit et vécu à leur sujet, nous le confrontons, et nous en tirons un classement. Quand les mesures indépendantes manquent, nous le disons et nous changeons de méthode — sans jamais changer de niveau d'exigence sur la transparence.

Version 5.1 du protocole — en vigueur depuis le

Deux personnes annotant des documents de synthèse devant des ordinateurs portables
Dépouillement des sources d'un comparatif : tests publiés, avis clients, retours d'usage et signalements.

Le principe : agréger plutôt que mesurer

Un laboratoire teste trois exemplaires pendant trois semaines. Les acheteurs d'un produit, eux, sont des dizaines de milliers à l'utiliser pendant des années. Les deux informations sont utiles, et aucune ne remplace l'autre : la mesure instrumentée dit ce que vaut un produit neuf en conditions contrôlées, le retour d'usage dit ce qu'il devient au bout de dix-huit mois.

Notre travail consiste à réunir ces deux familles de signaux sur un même produit, à écarter celles qui ne sont pas fiables, puis à exposer les points où elles se contredisent — car un désaccord entre un test flatteur et un millier de retours négatifs est en soi une information.

Ce que nous ne faisons pas

Nous n'achetons aucun produit, nous n'en recevons aucun, et nous ne réalisons aucune mesure physique. Toutes les valeurs chiffrées publiées sur ce site proviennent de sources tierces, systématiquement identifiées.

Les cinq étapes d'un comparatif

Entre le cadrage d'une catégorie et sa publication, il s'écoule quatre à huit semaines.

  1. Cadrage

    Nous fixons le périmètre — catégorie, fourchette de prix, modèles réellement distribués en France — ainsi que les critères et les types de sources admis. Cette grille est arrêtée avant toute collecte.

  2. Collecte

    Recensement systématique des sources disponibles sur chaque modèle : tests publiés, avis d'acheteurs, discussions communautaires, signalements officiels. La période couverte et le volume collecté sont notés.

  3. Qualification

    Chaque source est évaluée : origine identifiable, indépendance, taille d'échantillon, méthode décrite. Les avis suspects et les sources non traçables sont écartés avant toute agrégation.

  4. Agrégation

    Les valeurs mesurées sont rapprochées — nous retenons la médiane des tests indépendants — ou, à défaut de mesures, les caractéristiques comparables sont confrontées. Les retours d'usage sont codés par thème récurrent, et les divergences entre sources conservées, pas lissées.

  5. Publication

    Classement, réserves explicites, niveau de confiance, nombre de sources dépouillées et date de dernière révision. La liste des sources est publiée en fin de chaque comparatif.

Les sources et leur poids

Toutes les sources ne se valent pas. La pondération ci-dessous est fixée avant la collecte et publiée dans chaque comparatif ; elle varie de dix points au maximum selon les catégories.

Pondération type des sources dans la note globale d'un produit
Famille de sources Poids Ce qu'elle apporte Comment nous la qualifions
Tests instrumentés indépendants 40 % Valeurs mesurées comparables : autonomie, consommation, performances Protocole décrit et reproductible, laboratoire ou rédaction sans lien capitalistique avec la marque
Avis d'acheteurs vérifiés 25 % Satisfaction à l'usage, défauts qui apparaissent après quelques mois Achat confirmé par le marchand, volume suffisant, détection des dépôts massifs et des faux avis
Retours d'usage durable 20 % Fiabilité dans le temps, qualité du service après-vente, pannes récurrentes Communautés spécialisées, forums techniques, fils de discussion identifiables et datés
Signaux d'alerte 15 % Rappels produits, plaintes répétées, litiges, controverses documentées Sources officielles, associations de consommateurs, faits corroborés par au moins deux sources

Quand les mesures indépendantes manquent

Toutes les catégories ne sont pas également documentées. Sur un casque à réduction de bruit, plusieurs laboratoires publient des mesures comparables ; sur bien d'autres produits, il n'existe aucun test instrumenté sérieux. Renoncer à comparer reviendrait à laisser le lecteur sans repère là où il en a le plus besoin.

Nous basculons alors sur un second régime d'évaluation, annoncé en tête du comparatif concerné. Le classement ne repose plus sur des performances mesurées, mais sur trois éléments vérifiables.

1. Les caractéristiques réellement comparables

Une caractéristique n'est retenue que si elle est exprimée dans la même unité par tous les modèles du panel, si la base de déclaration est connue, et si elle est recoupée entre la fiche du fabricant et celle d'au moins deux marchands. Toute valeur retenue est signalée comme déclarée par le fabricant, jamais présentée comme mesurée.

Sont systématiquement écartées les valeurs que les fabricants établissent chacun à leur façon : puissance d'aspiration en pascals, pression de pompe en bars, autonomie précédée de « jusqu'à », portée sans fil annoncée en champ libre. Les afficher côte à côte donnerait l'illusion d'une comparaison.

2. Les retours d'acheteurs, en volume suffisant

Ils prennent ici plus de poids que dans le régime principal, avec les mêmes garde-fous : volume minimal, lecture de la distribution des notes plutôt que de la moyenne, priorité aux avis récents, et retrait des lots présentant des signes de manipulation.

Un produit dont les avis sont trop peu nombreux ou trop récents pour être exploités reste dans le tableau avec la mention « données insuffisantes », sans note.

3. Le rapport qualité-prix

Faute de pouvoir départager des performances, nous rapportons le score obtenu sur les critères vérifiables au prix réellement constaté et au coût d'usage sur cinq ans. C'est le seul classement honnête possible dans ce régime : il ne dit pas quel produit est le meilleur, il dit lequel offre le plus pour son prix.

Ce que ce régime ne permet pas

Il ne détecte pas l'écart entre ce qu'un fabricant annonce et ce que son produit fait réellement — c'est précisément l'apport d'une mesure. En conséquence, le niveau de confiance d'un comparatif établi selon ce régime ne dépasse jamais « moyen », et nous le réévaluons dès que des tests instrumentés sont publiés.

Pondération du second régime

Elle s'applique en lieu et place de la pondération principale, et figure dans le comparatif concerné.

Pondération appliquée en l'absence de mesures indépendantes
Famille de sources Poids Ce qu'elle apporte Condition de recevabilité
Caractéristiques déclarées 35 % Capacités, dimensions, formats, compatibilités, garanties Même unité pour tout le panel, recoupée sur trois sources au minimum
Avis d'acheteurs vérifiés 30 % Satisfaction à l'usage, défauts apparus après quelques mois Achat confirmé, volume suffisant, lots suspects écartés
Retours d'usage durable 20 % Fiabilité, service après-vente, disponibilité des pièces Fils de discussion identifiables et datés
Signaux d'alerte 15 % Rappels, plaintes répétées, litiges documentés Sources officielles ou faits corroborés par deux sources

Le rapport qualité-prix n'apparaît pas dans ce tableau : ce n'est pas une famille de sources, mais le rapport appliqué au score final pour établir le classement.

Nos règles fixes

Trois sources indépendantes minimum

Aucun produit n'entre dans un classement s'il ne réunit pas au moins trois sources indépendantes les unes des autres. En dessous, il figure dans le comparatif avec la mention « données insuffisantes » plutôt qu'avec une note qui ferait croire à une évaluation solide.

Le régime d'évaluation est annoncé en tête de page

Chaque comparatif indique sur quelle base il a été établi : mesures indépendantes lorsque des tests instrumentés existent, caractéristiques et retours d'usage lorsqu'il n'y en a pas. Le lecteur sait ainsi, avant de lire le classement, ce qui le fonde — et un comparatif ne change jamais de régime sans que la page le mentionne.

Un niveau de confiance affiché

Chaque note est accompagnée d'un niveau de confiance, fonction du nombre de sources, de leur qualité et de leur convergence. Une note de 4,2 appuyée sur douze sources concordantes et une note de 4,2 tirée de trois sources qui se contredisent ne disent pas la même chose. Dans le second régime d'évaluation, il est plafonné à « moyen ».

Les faux avis sont écartés, pas corrigés

Nous recherchons les signaux habituels de manipulation : pics de dépôts, formulations dupliquées, comptes sans historique, notes extrêmes concentrées sur quelques jours. Les lots suspects sont retirés de l'échantillon et le retrait est mentionné dans le comparatif.

Les divergences sont publiées

Lorsqu'un test de laboratoire et les retours d'acheteurs s'opposent franchement, nous l'écrivons au lieu d'en faire une moyenne. C'est souvent le signe d'un défaut qui n'apparaît qu'après plusieurs mois d'usage.

Aucune relation avec les marques

Nous n'acceptons ni produit, ni échantillon, ni prêt, ni invitation. Ne réalisant aucun test, nous n'avons aucune raison d'être en contact avec un fabricant, hors demande de rectification factuelle.

Les erreurs sont corrigées en clair

Une correction n'est jamais silencieuse : la page porte la mention de la modification, sa date et son motif. Les corrections majeures font l'objet d'un encadré en tête d'article.

Les limites de cette méthode

Une méta-analyse ne vaut que ce que valent ses sources. Nous préférons exposer ses faiblesses plutôt que les laisser découvrir :

  • Nous dépendons de l'existant. Si personne n'a mesuré sérieusement un produit, nous ne pouvons pas combler ce vide : nous basculons sur les caractéristiques et les retours d'usage, en le signalant.
  • Une caractéristique déclarée n'est pas une performance constatée. Dans le second régime d'évaluation, rien ne garantit que le produit tienne ce que sa fiche annonce. C'est la limite structurelle de cette approche, et la raison pour laquelle nous plafonnons le niveau de confiance.
  • Les produits récents sont désavantagés. Un modèle sorti depuis deux mois n'a ni recul d'usage, ni historique de pannes : nous le signalons plutôt que de le noter au même titre que les autres.
  • Les avis clients sont polarisés. On écrit plus volontiers après une déception ou un coup de cœur ; l'usage ordinaire est sous-représenté, et la pondération ne le corrige qu'en partie.
  • Les protocoles diffèrent d'un test à l'autre. Deux laboratoires ne mesurent pas une autonomie dans les mêmes conditions : nous retenons la médiane et indiquons la dispersion, ce qui atténue l'écart sans le supprimer.
  • Les signaux faibles arrivent tard. Un défaut de série met souvent un an à devenir visible dans les retours. D'où la révision régulière de chaque classement.

Accès aux sources

La liste des sources de chaque comparatif — famille, référence, période et apport au classement — est publiée en fin de page, sous le tableau « Les sources de ce comparatif ». Notre modèle de financement est détaillé dans la charte d'indépendance.