Le méta-score Moto Académie

Sur chaque fiche moto se trouve un chiffre sur 100 : c’est le méta-score Moto Académie. C’est un résumé chiffré de ce que la presse spécialisée, en France et à l’étranger, a pensé de la moto après l’avoir essayée.

C’est quoi, le méta-score ?

Un méta-score, c’est une note qui résume d’autres notes. Le principe est le même que celui des sites qui compilent les critiques de films : au lieu de te fier à un seul essai, tu vois d’un coup d’œil ce que la presse pense, en moyenne, d’une moto.

En effet, chaque fiche de Moto Académie rassemble les essais publiés par des médias moto de différents pays. Quand ces médias donnent une note, on la convertit sur 100. Quand ils n’en donnent pas, on en déduit une à partir de leur verdict, selon une méthode que nous avons inventée. Le méta-score est la moyenne pondérée de tout ça.

Le méta-score porte sur une génération de la moto (même moteur, même cadre), et pas sur un millésime précis. Il est accompagné d’un niveau de confiance, parce qu’une moyenne de deux notes ne vaut pas la même chose qu’une moyenne de huit notes qui vont dans le même sens : plus l’échantillon est large, plus la confiance est élevée.

D’où viennent les notes ?

Les notes que nous analysons proviennent d’essais publiés par des médias spécialisés. Pour chaque moto, on cherche les essais parus par exemple chez Motorcycle News, Bennetts BikeSocial et Visordown au Royaume-Uni, chez Cycle World, Motorcycle.com et RevZilla aux États-Unis, chez Motorrad et 1000PS en Allemagne et en Autriche, chez Moto.it et Motociclismo en Italie et en Espagne et bien sûr chez Moto Magazine, Moto Journal, Le Repaire des Motards, Moto-Net et Caradisiac en France.

Chaque essai retenu est daté et rattaché à la version et au millésime exacts qui ont été essayés. On trouve la liste complète sur la fiche, avec un lien vers chaque article, ce qui permet à nos lecteurs d’aller consulter le texte intégral sur le site d’origine.

Les notes sont ramenées sur une base 100 pour pouvoir être comparées : 4 étoiles sur 5 deviennent 80, 17,4 sur 20 deviennent 87, 8,5 sur 10 deviennent 85 et ainsi de suite. Bien sûr, un média ne compte qu’une fois par génération : si un titre a essayé la même moto trois fois, c’est l’essai le plus récent qui est pris.

Les forums, les commentaires de vidéos et de réseaux sociaux n’entrent pas dans le méta-score. Ce n’est pas parce que l’avis des motards ne compte pas, mais parce qu’on ne peut pas vérifier qui parle, ni quel est son niveau, le nombre de kilomètres parcourus, et qu’on ne peut même pas savoir s’il a vraiment roulé avec la moto. C’est pour cela que l’avis de véritables journalistes moto est précieux : un journaliste moto, c’est quelqu’un qui a essayé des dizaines et des dizaines de bécanes, et qui s’est donc fabriqué une base de comparaison irremplaçable.

Quand un essai ne donne pas de note

C’est un cas fréquent. Beaucoup de médias moto écrivent un essai complet, avec un verdict assez clair, mais sans jamais mettre de chiffre au bout. Ce qui est dommage, car les ignorer reviendrait à calculer un méta-score sur une ou deux notes, ce qui ne veut plus rien dire.

On a donc conçu un système qui attribue à ces essais une note estimée, selon la grille d’analyse suivante :

1. le verdict de l’essayeur : soit il recommande la moto, soit il la recommande avec des réserves, soit il la déconseille ;
2. le nombre de reproches et leur gravité : par exemple, dire qu’une selle est un peu trop ferme n’est pas aussi impactant que dire qu’une boîte de vitesses est capricieuse ;
3. la place de la moto dans les comparatifs quand il y en a ;
4. la conclusion.

Chaque critère a une valeur fixe, la somme de ces valeurs donne une note sur 100. Les éléments relevés sont conservés avec la note : on peut donc toujours retrouver pourquoi un essai a reçu 78 plutôt que 85.

Cette lecture est faite par un outil d’analyse de texte, puis vérifiée sur des essais qui, eux, ont une note. C’est inspiré des systèmes d’IA qui s’améliorent petit à petit : on cache le chiffre, on fait estimer, on compare. Tant que l’écart moyen reste faible, la méthode est jugée fiable. Reste qu’une note estimée compte quand même moins qu’une vraie note dans le calcul, avec une pondération de 0,6 au lieu de 1.

Sur la fiche, les deux sont distinguées : on indique combien de notes sont chiffrées et combien sont estimées.

Comment le score est-il calculé ?

Le méta-score est lui aussi une moyenne pondérée : chaque essai se voit attribuer un poids, et on calcule la moyenne des notes en tenant compte de ces poids.

Deux éléments principaux font varier le poids :

• la nature de la note : 1 pour une note chiffrée, 0,6 pour une note estimée comme on vient de l’expliquer ci-dessus ;
• la pertinence : 1 si l’essai porte exactement sur la version et le millésime de la fiche, 0,8 s’il porte sur une autre version ou un autre millésime de la même génération. Les essais d’une génération précédente ne comptent pas parce que ce n’est plus la même moto, et ce serait vraiment délicat d’impacter un score actuel avec un score passé, notamment si le constructeur a rectifié une critique fréquente.

Prenons un exemple, avec trois essais fictifs :

Essai	Note	Sur 100	Nature	Pertinence	Poids
Média A	4/5	80	chiffrée (1)	version exacte (1)	1
Média B	17,4/20	87	chiffrée (1)	autre version (0,8)	0,8
Média C	aucune	82 estimée	estimée (0,6)	version exacte (1)	0,6

Méta-score = (80 × 1 + 87 × 0,8 + 82 × 0,6) ÷ (1 + 0,8 + 0,6) = 198,8 ÷ 2,4 ≈ 82,8, soit 83.

Sans le troisième essai, le score aurait été 83 aussi, mais calculé sur deux notes au lieu de trois : c’est le même chiffre, mais la confiance est plus faible. C’est pour ça que le chiffre seul ne suffit pas totalement.

Pourquoi un indice de confiance ?

On l’a vu, un méta-score de 84 obtenu avec deux notes et un méta-score de 84 obtenu avec huit notes, ce n’est pas pareil. Dans le premier cas, le score peut basculer de dix points avec un seul essai de plus ; alors que dans le second cas l’addition d’un nouvel essai ne fera changer le méta-score que de peu.

L’indice de confiance est donc nécessaire. Il tient compte de deux éléments : d’abord, le poids total des essais retenus, et ensuite leur dispersion. La presse est-elle d’accord, ou les notes vont-elles de 55 à 95 ? Si c’est le cas, la dispersion montre un problème.

Confiance	Quand	Ce qu’on affiche
Insuffisante	poids total inférieur à 2 (par exemple une seule note chiffrée et un essai estimé)	pas de chiffre ; seulement « avis presse : favorable », « mitigé » ou « défavorable »
Faible	poids total de 2 à moins de 4, ou d’au moins 4 avec des notes dispersées (écart-type supérieur à 8 points)	le chiffre, avec la mention « confiance faible »
Élevée	poids total d’au moins 4 et des notes groupées (écart-type de 8 points ou moins)	le chiffre, avec la mention « confiance élevée »

Dans tous les cas, la fiche indique le nombre de notes chiffrées et le nombre de notes estimées. On préfère ne pas afficher de score plutôt qu’en afficher un qui a l’air précis et ne l’est pas. Cela dit, lorsqu’il s’agit d’acheter une moto, le meilleur moyen c’est de l’essayer. Les scores de moto-academie.fr ne sont là que pour t’aider à trier les modèles que tu pourrais vouloir essayer…

Comment lire un méta-score ?

La presse moto note souvent généreusement. Une moto vraiment décevante descend rarement sous 60, et la plupart des motos récentes se situent entre 75 et 90. L’échelle est donc compressée vers le haut. Peut-être que cela veut dire aussi qu’il n’existe pas de moto vraiment décevante ? On te laisse juge. Quoi qu’il en soit, il faut savoir lire le méta-score en tenant compte de ce phénomène.

Méta-score	Ce que ça veut dire, en pratique
85 et plus	Consensus très favorable : les essayeurs la recommandent presque sans réserve, souvent comme référence de sa catégorie
75 à 84	Bonne moto, avec des défauts identifiés et partagés par plusieurs essais : lire les points faibles soigneusement
65 à 74	Avis mitigé : la moto plait à certains essayeurs et pas à d’autres, ou elle est jugée dépassée
Moins de 65	Réserves sérieuses dans la plupart des essais

Entre deux motos à 83 et 86, l’écart ne suffit pas à dire que l’une est meilleure que l’autre : trois points, ce n’est pas autre chose que l’écart entre deux essayeurs sur la même moto. On le voit bien sur certains essais YouTube à trois journalistes : chaque journaliste donne un avis différent en fonction de ses préférences personnelles, de sa manière de piloter, etc. C’est la limite de l’avis personnel.

On pourrait donc dire que le méta-score sert à repérer les motos que la presse aime et celles qu’elle n’aime pas ; mais il ne sert pas à départager deux motos proches. Pour ça, il y a le comparateur et la lecture des essais eux-mêmes et surtout le fait de monter dessus et de rouler avec.

Ce que le méta-score n’est pas

Le méta-score est une valeur générique qui ne dit pas si la moto convient au lecteur. Un trail noté 88 reste un trail : haut, large, avec une selle autour de 850 mm. Un roadster à 79 sera peut-être un bien meilleur choix pour quelqu’un de 1,70 m qui fait des trajets. Le méta-score résume la qualité perçue par des essayeurs professionnels, pas l’adéquation à un utilisateur.

Il reflète surtout des essais de lancement. La plupart des essais sont réalisés en quelques jours, souvent sur une route choisie par le constructeur dans un cadre sympa (sud de l’Espagne, Maroc…), avec une moto neuve et soigneusement préparée. Les essais de longue durée sont plus rares, mais ils pèsent le même poids dans le méta-score parce qu’on ne peut tout de même pas prévoir tous les cas imaginables. La fiabilité à 30 000 km, le coût des révisions ou la cote d’occasion ne sont pas inclus dans le méta-score.

Les échelles diffèrent d’un média à l’autre. Une note de 4/5 chez un essayeur qui ne descend presque jamais sous 4 est une note moyenne ; le même 4/5 chez un titre généralement sévère est une bonne note. On convertit sur 100 sans corriger ces particularités : pour le faire de façon fiable, il faudrait beaucoup d’essais par média.

Une partie des notes est estimée. Même avec une grille fixe et une vérification sur les essais notés, une note estimée reste une lecture qu’on fait d’un texte, parfois d’un texte traduit en français. C’est pour ça qu’elle pèse moins et qu’elle est signalée.

Il ne représente pas l’avis des propriétaires. Les retours des motards qui roulent avec la moto au quotidien sont rares. Lorsqu’on peut en trouver, ils sont traités séparément, sur la fiche, mais ils ne sont jamais mélangés à la note de la presse parce qu’on ne connaît pas le motard qui a laissé un avis.

Le méta-score peut changer. Un essai de plus peut faire varier le score, surtout quand la confiance est faible. La date de mise à jour est affichée sur la fiche.

En cas d’erreur ?

Chaque note est reliée à l’essai dont elle provient. Si tu constates une erreur, écris-nous par le formulaire de contact en indiquant la fiche et le lien de l’essai. Les corrections seront faites dans les meilleurs délais.

Questions fréquentes

Le méta-score est-il l’avis de Moto Académie ? Non. Notre avis est dans la section « Notre avis » de chaque fiche, en toutes lettres. Le méta-score ne fait que résumer ce que la presse spécialisée a écrit.

Pourquoi certaines fiches n’ont pas de méta-score ? Parce qu’il n’y a pas assez d’essais pour qu’un chiffre soit fiable. La fiche indique alors seulement si l’avis de la presse est favorable, mitigé ou défavorable.

Une note estimée, c’est quoi ? C’est une note attribuée à un essai à partir de son verdict, de ses reproches et de sa conclusion, selon une grille identique pour tous les essais. Elle compte 0,6 fois une note chiffrée et elle est signalée.

Pourquoi un essai de l’ancienne génération ne compte-t-il pas ? Un nouveau moteur, un défaut corrigé ou un nouveau cadre change la moto. Les essais de la génération précédente restent consultables sur la fiche de la génération concernée quand elle existe.

Le méta-score tient-il compte du prix ? Indirectement seulement : un essayeur qui trouve la moto trop chère pour ce qu’elle offre le dit généralement, donc sa note en tient compte. Mais le méta-score n’est pas une note de rapport qualité-prix.

Les commentaires des motards sur les forums comptent-ils ? Non. On ne peut pas vérifier qui parle ni s’il a roulé avec la moto. Les retours de propriétaires, quand on en trouve, sont traités à part et jamais mélangés à la note de la presse.