La bande étroite
Ouvrez n'importe quelle liste de notes personnelles, la vôtre ou celle de quelqu'un d'autre, et regardez la dispersion. Dix points étaient disponibles ; presque tout se situe entre 6,5 et 8,5. Les critiques de jeux vidéo traînent cette blague depuis des années, la fameuse « échelle de 7 à 9 », mais les listes privées se compriment tout autant, et ce n'est pas de la paresse. Trois forces discrètes poussent chaque noteur dans cette bande.
Votre échantillon est truqué
Vous ne notez jamais un échantillon aléatoire du monde. Vous notez ce que vous avez choisi : le film qu'une bande-annonce vous a vendu, le restaurant qu'un ami vous a recommandé, le livre qui a survécu à son premier chapitre. Les candidats vraiment mauvais ont été écartés avant même que vous n'appuyiez sur lecture : la moyenne honnête de ce que vous vivez vraiment est donc élevée. Le problème commence quand vous notez par rapport à un univers imaginaire de tout ce qui existe, au lieu de votre propre échantillon présélectionné. « Plutôt bien, pour quelque chose que j'ai choisi » s'arrondit à 7, à chaque fois.
Des repères empruntés
Les moyennes publiques attirent votre échelle vers la leur. IMDb se concentre autour de 7,5 : un film que vous avez aimé « un peu plus que la moyenne » atterrit à 7,8 presque par réflexe. Et même dans une liste que personne d'autre ne lira, un 3 ressemble à une insulte envers quelque chose qu'une personne a créé. Le résultat est une échelle empruntée à la foule et adoucie par la politesse, autrement dit, pas vraiment la vôtre.
Les extrêmes inutilisés
Les extrémités restent inutilisées pour des raisons opposées. Le 10 est gardé en réserve pour une perfection qui n'est pas encore arrivée, comme si le dépenser ne laisserait rien pour plus tard. Les 1 et les 2 restent inutilisés parce que vous abandonnez tôt ceux qui les mériteraient ; ce qui est assez mauvais pour les mériter est rarement terminé, et encore moins noté. Avec les deux extrêmes vides, tout ce qui est réel se retrouve comprimé dans la partie moyenne-haute qui reste.
Ce que la compression vous coûte
Une échelle de notation est un instrument de mesure, et sa plage utile est sa résolution. Travaillez sur deux points effectifs et les différences qui comptent vraiment se noient dans le bruit : 8,2 contre 8,3, c'est pile ou face, votre tier list s'effondre en une longue bande de A, et le 7,5 de cette année ne signifie plus ce que signifiait celui de l'an dernier. La liste cesse de répondre à la seule question pour laquelle elle existe : lequel de ceux-là ai-je vraiment préféré ?
Comment vous recalibrer
- Redéfinissez le 5. Qu'il désigne la médiane de tout ce que vous avez essayé, et non la médiocrité cosmique. En principe, la moitié de ce que vous notez devrait se situer en dessous.
- Ancrez les extrêmes dans de vrais souvenirs. Votre meilleur de tous les temps est le 10 ; la pire chose que vous ayez vraiment terminée est le 1. Chaque nouveau score devient un placement entre des choses dont vous vous souvenez, et non une négociation avec un idéal.
- Pensez en centiles. Un 9, c'est « le dixième supérieur de tout ce que j'ai mangé », une affirmation que vous pouvez vérifier, contrairement à « excellent ».
- Examinez votre histogramme. Une répartition saine a de la dispersion et des extrêmes. Une courbe en cloche centrée sur 7,5 sans rien sous 5 est un signal d'alerte de calibrage, pas une bonne série.
- Recalez-vous de temps en temps. Revoyez chaque année une poignée d'anciennes notes par rapport à vos repères actuels. La dérive est continue ; la correction doit l'être aussi.
Ou contournez complètement l'échelle
Il existe aussi un moyen de contourner le problème plutôt que de le traverser. Le classement par paires ne demande jamais « à quel point ? », seulement « lequel des deux ? », et cette question est insensible à la compression. Votre bande peut être aussi étroite qu'elle veut ; les duels mettent quand même la liste dans son vrai ordre.
RateTheThings agit sur les deux fronts. Chaque liste a un histogramme pour voir votre dispersion d'un coup d'œil, la page de statistiques vous alerte quand les scores se tassent, et les duels par paires départagent les voisins que vos chiffres ne séparent pas. Si vos vingt dernières notes étaient toutes des 7 virgule quelque chose, ouvrez votre liste et regardez l'histogramme. Il sait.