Retour au blog

EN PRATIQUE

Sais-tu vraiment estimer ? La calibration se mesure

Désigner un vainqueur, un sur deux y arrive. Viser juste sur la probabilité, c’est un métier — et ça tient dans un seul chiffre. Dix affirmations te diront si tu te fais trop confiance, pas assez, ou juste ce qu’il faut.

Sur un marché prédictif, ce n’est pas celui qui devine le résultat qui gagne. C’est celui qui vise juste sur la probabilité. L’idée déroute, parce que le monde autour de nous récompense la certitude : un commentateur qui a dit « ça va arriver », et c’est arrivé, a l’air malin. Sur un marché, la récompense est ailleurs — dans le fait que tes soixante-dix pour cent se réalisent bien dans soixante-dix pour cent des cas.

La bonne nouvelle, c’est que ça se mesure. Pas au feeling, pas après coup, mais avec un chiffre que tu découvres sur toi-même en dix minutes. La mauvaise, c’est que ce chiffre est au début désagréable pour presque tout le monde.

La calibration : quand « quatre-vingts pour cent » veut vraiment dire quatre-vingts

La calibrationL’accord entre la confiance que tu affiches et ta réussite réelle. Quelqu’un de calibré se trompe, sur les affirmations auxquelles il donne 80 %, dans exactement un cas sur cinq — ni plus, ni moins. ne consiste pas à avoir souvent raison. Elle consiste à ce que tes chiffres ne mentent pas. Celui qui annonce quatre-vingt-dix pour cent partout et vise juste dans soixante est dangereux pour lui-même : il surpaie chaque pari, parce qu’il achète une certitude qu’il n’a pas.

L’erreur inverse est plus rare, mais elle existe. Celui qui n’ose pas dire plus de soixante pour cent, alors qu’il sait de quoi il parle, laisse de l’argent sur la table — et surtout ne trouve jamais le pari dans lequel il vaudrait la peine d’aller franchement.

On mesure ça avec le score de BrierLa moyenne des carrés de l’écart entre ton estimation et la réalité. Zéro, c’est la perfection ; 0,25 correspond à dire 50 % partout ; et au-delà de 0,25, tu ferais mieux avec une pièce.. Il se fiche de savoir si tu « avais raison » — il te punit pour la certitude que tu affichais au moment où tu t’es trompé.

Le mieux, c’est d’essayer. Dix affirmations ; pour chacune, place le curseur là où tu crois qu’elle est vraie. Cinquante pour cent, c’est le pur hasard ; zéro veut dire « c’est faux, à coup sûr » :

Dix affirmations, une question : à quel point te fais-tu confiance ? 50 % = pile ou face
  • 1

    Polymarket tourne sur le réseau Polygon.

    50 %
  • 2

    Il ne peut exister au maximum que 21 millions de bitcoins.

    50 %
  • 3

    Ethereum est passé au proof of stake en 2022.

    50 %
  • 4

    L’USDC et l’USDT sont émis par la même entreprise.

    50 %
  • 5

    Une part sur un marché prédictif paie exactement un dollar quand elle gagne.

    50 %
  • 6

    Un nouveau bloc Bitcoin apparaît en moyenne toutes les dix minutes.

    50 %
  • 7

    Une phrase seed compte toujours exactement douze mots.

    50 %
  • 8

    Les frais sur Polygon se paient en ETH.

    50 %
  • 9

    Un oracle optimiste soumet au vote chaque résultat proposé.

    50 %
  • 10

    Le critère de Kelly maximise la croissance du compte sur le long terme.

    50 %

Dix questions, c’est trop peu pour une vraie mesure — largement assez pour te voir. Qui prend la chose au sérieux note ses estimations sur de vrais paris et les dépouille toutes les cinquante.

Comment lire ce score

0,25, c’est la ligne de l’indifférence — exactement ce que tu obtiens en laissant les dix curseurs à cinquante pour cent. En dessous, ça veut dire que tu sais quelque chose. Au-dessus, ça veut dire que ta confiance te nuit : soit tu paries contre tes propres connaissances, soit — bien plus souvent — tu te fies à toi plus que la réalité ne le justifie.

Regarde surtout le duo confiance moyenne et réussite réelle. Quand la première dépasse nettement la seconde, tu as l’excès de confiance de manuel. Ce n’est pas une honte, c’est le trait le mieux documenté du jugement humain — et le seul remède connu consiste à écrire ses estimations à l’avance, puis à les regarder.

Pourquoi des carrés Brier met l’erreur au carré exprès. Se tromper de dix points de pourcentage, c’est une broutille ; se tromper de quatre-vingt-dix, c’est une catastrophe — et le carré rend cet écart cent fois plus grand. C’est exactement ainsi que l’erreur se traduit sur le compte.

L’estimation part du taux de base, pas de l’histoire

Quand une nouvelle tombe, on a tendance à réécrire toute l’estimation autour d’elle. C’est l’erreur que les marchés punissent tous les jours. Le bon ordre est l’inverse : pars du taux de baseLa fréquence à laquelle la chose arrive en général, indépendamment de l’actualité du jour. Pour des questions du type « le ministre démissionnera-t-il d’ici la fin du mois ? », le taux de base est remarquablement bas, même quand les titres hurlent. et laisse la nouvelle le déplacer, rien de plus. De combien, cela ne dépend que d’une chose : à quelle fréquence cette nouvelle arriverait s’il ne se passait rien.

Cent mondes combien il en reste quand la nouvelle tombe

ça se produit et la nouvelle arrive ça ne se produit pas, et la nouvelle arrive quand même

20 % Estimation avant la nouvelle
40 % Estimation après la nouvelle
+20 pts Déplacement

Une nouvelle qui tombe aussi quand il ne se passe rien déplace peu l’estimation. Plus la fausse alerte est rare, plus la nouvelle pèse.

Essaie de monter la fausse alerte à quatre-vingts pour cent. L’estimation ne bouge presque pas — et c’est exactement la situation où les marchés bougent le plus : il tombe une nouvelle qui ne distingue pratiquement rien, et le prix saute quand même. C’est là que naît l’avantage de celui qui calcule.

La calibration seule ne rapporte rien Même parfaitement calibré, on finit à zéro si le marché l’est tout autant. Ce qui rapporte, c’est l’écart — ton estimation doit être meilleure que celle qui est déjà dans le prix. La calibration, c’est le ticket d’entrée, pas le gain.

Trois habitudes qui font bouger les choses

Écris l’estimation avant. Sans trace écrite, après coup tout le monde se souvient de l’avoir « plus ou moins senti venir ». Une colonne dans un tableur suffit : date, question, ton pourcentage. Au bout de cinquante lignes, tu te verras mieux qu’après cinq ans d’impressions.

Demande-toi ce qui te convaincrait du contraire. Si tu n’as pas de réponse, tu n’as pas une estimation, tu as une position. Une estimation, ça se déplace avec des preuves ; une position, non.

Distingue « je ne sais pas » de « je m’en fiche ». Cinquante pour cent est une réponse honnête à une question que tu as travaillée et qui ressort indécise. Pour une question que tu n’as pas lue, la réponse n’est pas cinquante pour cent, c’est : ne pas parier.

Ce qu’il faut retenir

  • Le marché ne paie pas pour le résultat deviné, mais pour la probabilité visée juste.
  • Un score de Brier sous 0,25 veut dire que tu sais quelque chose. Au-dessus, une pièce ferait mieux.
  • L’écart entre confiance moyenne et réussite, c’est ton excès de confiance mis en chiffre.
  • L’estimation part du taux de base. La nouvelle ne fait que la déplacer — et d’autant moins qu’elle tombe souvent pour rien.
  • La calibration te met dans le jeu. Ce qui rapporte, c’est l’écart avec le marché.

Avec cet épisode, tu as la panoplie complète : tu sais ce qu’est un marché prédictif, comment y entrer, qui décide de l’issue, combien mettre dans un pari, ce qui se lit dans les gros portefeuilles — et désormais aussi comment savoir si tes propres chiffres veulent dire quelque chose. Le reste, c’est de la répétition et des notes honnêtes.