« Les marchés de prédiction ont généralement raison » est le genre d'affirmation que l'on répète sans jamais la vérifier. C'est pourtant testable : un marché qui annonce 70 % devrait gagner environ sept fois sur dix, et si ce n'est pas le cas, le marché n'est pas aussi précis que le croient ses partisans. La précision n'est pas une impression ; c'est une propriété arithmétique que vous pouvez mesurer par rapport à des résultats déjà tranchés, une plateforme à la fois.
Si vous êtes encore en train de vous forger une idée de ce que sont les marchés de prédiction et de la façon dont leurs prix deviennent des probabilités, commencez par là. Ce guide porte sur la question plus ardue : une fois qu'un marché affiche un chiffre, quelle est la qualité de ce chiffre, et comment le sauriez-vous ? La réponse courte à quelle est la précision des marchés de prédiction est que les meilleurs sont remarquablement bien calibrés, les pires ne le sont pas, et la seule façon honnête de les distinguer est de les évaluer.
TL;DR
- La précision a une signification précise : les événements à 70 % d'un marché bien calibré se produisent environ 70 % du temps. C'est mesurable par rapport à des marchés déjà résolus.
- Deux chiffres font le travail : l'erreur de calibration (ECE) — l'écart entre les probabilités prédites et les taux réalisés — et le score de Brier, qui récompense aussi la confiance.
- Une bonne calibration exige un test équitable : suffisamment de marchés résolus, des résultats confirmés par le fournisseur et un véritable historique avant résolution. Les marchés éphémères et les carnets peu fournis la faussent.
- Les plateformes à argent réel dotées d'une liquidité profonde (Polymarket, Kalshi) tendent à être bien calibrées ; les plateformes à argent fictif et de prévision peuvent l'être aussi, mais les incitations diffèrent.
- CoinRithm évalue la calibration par plateforme à partir des résultats résolus et la publie sur la page des sources — ainsi « précis » est un chiffre que vous pouvez inspecter, pas un argument marketing.
- Aucun marché n'est une boule de cristal. La calibration mesure l'honnêteté des cotes, pas la certitude sur l'avenir.
Ce que « précis » signifie vraiment
Il y a deux choses différentes que les gens entendent par un marché de prédiction précis, et les confondre est à l'origine de la plupart des malentendus.
La première est la précision de résolution : le résultat que le marché jugeait le plus probable s'est-il effectivement produit ? C'est l'intuitif — « le marché a prédit l'élection » — mais pris isolément, c'est presque inutile. Un marché qui annonce 55 % et voit le favori l'emporter a l'air « d'avoir raison », pourtant un pronostic à 55 % qui se réalise n'est guère plus informatif qu'un tirage à pile ou face. Juger une prévision probabiliste sur le seul fait que son favori a gagné, c'est jeter le chiffre qui en faisait une prévision au départ.
La seconde, et celle qui compte, est la calibration : sur toutes les fois où une plateforme a dit « 70 % », la chose s'est-elle produite environ 70 % du temps ? Une plateforme parfaitement calibrée est une plateforme dont les probabilités affichées correspondent à la réalité dans l'ensemble. Elle peut se tromper sur un marché isolé — c'est ce que signifie une probabilité — tout en étant extraordinairement fiable sur des centaines d'entre eux. La calibration est la propriété qui vous permet de faire confiance à un prix que vous n'avez jamais vu, exactement ce dont vous avez besoin quand vous lisez un marché à froid.
Tout ce qui suit porte sur la mesure de la seconde chose.
La calibration, en une image
Prenez chaque marché résolu d'une plateforme et regroupez ses prévisions selon la probabilité qu'elle leur a assignée : toutes les prévisions de 0 à 10 % dans un bin, de 10 à 20 % dans le suivant, et ainsi de suite jusqu'à 90-100 %. Ensuite, à l'intérieur de chaque bin, calculez le taux réalisé — la proportion de ces événements qui se sont réellement produits.
Pour une plateforme bien calibrée, les deux coïncident : le bin 20-30 % se résout par Oui environ un quart du temps, le bin 70-80 % environ trois quarts du temps. Tracez la probabilité prédite par rapport au taux réalisé et les points épousent la diagonale. Là où les points s'affaissent sous la ligne, la plateforme était surconfiante (elle disait 80 % mais ces événements se produisaient 65 % du temps) ; là où ils passent au-dessus, elle était sous-confiante.
CoinRithm construit précisément ces bins de fiabilité pour chaque plateforme dotée d'un historique suffisant, en utilisant la probabilité que le marché a assignée environ 24 heures avant la résolution — assez tard pour que l'essentiel de l'information soit dans le prix, assez tôt pour qu'il s'agisse d'une véritable prévision et non d'une formalité de règlement. C'est la même discipline qu'un service météo applique quand il vérifie si ses jours « 30 % de risque de pluie » ont effectivement connu 30 % de pluie.
Les deux scores qui la résument
Un graphique de fiabilité est honnête mais difficile à comparer d'un coup d'œil, alors deux chiffres uniques le condensent.
Erreur de calibration (ECE)
L'erreur de calibration attendue (Expected Calibration Error) est l'écart moyen, pondéré par l'échantillon, entre la probabilité prédite de chaque bin et son taux réalisé. Zéro est parfait ; plus elle grandit, plus les cotes affichées d'une plateforme s'éloignent de la réalité. L'ECE est l'indicateur le plus net pour « le chiffre de cette plateforme est-il digne de confiance ? », car elle ne néglige rien et ne flatte rien — elle mesure simplement la distance à la vérité. Sur l'échantillon de CoinRithm, les plateformes à argent réel les mieux calibrées se situent près de la diagonale, avec une erreur de calibration assez faible pour que leurs probabilités méritent d'être prises au pied de la lettre ; vous pouvez lire le chiffre actuel de chaque plateforme sur la page des sources.
Le score de Brier
Le score de Brier est l'erreur quadratique moyenne d'une prévision probabiliste : pour chaque marché, prenez l'écart entre la probabilité assignée à ce qui s'est réellement produit et 1 (ou 0 pour ce qui ne s'est pas produit), élevez-le au carré, et faites la moyenne. Il récompense le fait d'être à la fois calibré et confiant — une plateforme qui ramène tout vers 50 % peut paraître calibrée tout en étant quasi inutile, et le Brier sanctionne cette timidité. Plus c'est bas, mieux c'est ; 0 est un prévisionniste parfaitement confiant, 0,25 est le score que vous obtenez en disant 50 % à tout.
Les deux scores répondent à des questions différentes. L'erreur de calibration demande « les cotes sont-elles honnêtes ? » Le Brier demande « les cotes sont-elles honnêtes et tranchées ? » Une affirmation sérieuse de précision cite les deux.
Pourquoi un test équitable est plus difficile qu'il n'y paraît
La plupart des titres « les marchés de prédiction sont précis à 90 % » trichent discrètement, généralement de l'une de ces façons — et c'est parce que nous les évitons que nos chiffres sont plus prudents que les valeurs marketing que vous verrez ailleurs.
- Précision de résolution triée sur le volet. Compter « le favori a-t-il gagné » au lieu d'évaluer la probabilité gonfle toute plateforme comptant beaucoup de marchés déséquilibrés, quasi certains. Évaluez les probabilités, pas les gagnants.
- Noter sur des marchés déjà tranchés de toute façon. Inclure la probabilité d'un marché à l'instant avant sa résolution — quand la réponse est déjà évidente — fait paraître chaque plateforme clairvoyante. Nous évaluons le prix à environ 24 h de distance pour qu'il s'agisse d'une vraie prévision.
- Échantillons minuscules ou peu fournis. Dix marchés résolus ne prouvent rien. La calibration exige un échantillon minimal (nous imposons un seuil avant de publier le chiffre d'une plateforme) et une liquidité suffisante pour que les prix reflètent une conviction réelle plutôt qu'un ordre isolé et périmé.
- Exclure ce qui est difficile. Les marchés de courte durée sans véritable historique avant résolution sont écartés d'un test de calibration propre, ce qui réduit honnêtement la taille d'échantillon de certaines plateformes — nous préférons afficher un chiffre plus petit et équitable qu'un chiffre plus gros et flatteur.
C'est pourquoi la précision est une quantité propre à chaque plateforme et à chaque méthodologie, et non une propriété des « marchés de prédiction » en tant que catégorie. Deux plateformes peuvent toutes deux se dire précises et vouloir dire des choses radicalement différentes.
Alors — sont-ils précis ?
Pour les plateformes qui passent un test équitable, oui, et souvent de façon impressionnante. Les marchés à argent réel profonds comme Polymarket et Kalshi, réglementé par la CFTC, tendent à être bien calibrés sur de grands échantillons : leur 70 % est bien environ 70 %. Ce n'est pas de la magie — c'est de l'argent. Quand se tromper coûte du capital réel, les prix surconfiants sont arbitrés vers la vérité, ce qui est le même mécanisme que décrit notre guide de la divergence des probabilités entre plateformes.
Les plateformes à argent fictif et de prévision comme Manifold et Metaculus peuvent aussi être bien calibrées — parfois de façon frappante — car la réputation et les règles de notation donnent aux prévisionnistes leur propre incitation à être honnêtes. Mais comme rien n'est en jeu financièrement, nous ne mêlons jamais leurs cotes à un chiffre adossé à de l'argent ; la probabilité de référence est exclusivement à argent réel précisément pour cette raison.
La réserve essentielle : la calibration est une affirmation sur les cotes, pas sur l'avenir. Un marché parfaitement calibré qui annonce 30 % vous dit la vérité même quand le résultat à 30 % se produit. La précision signifie que le prix est une probabilité honnête — elle ne signifie pas que le marché sait ce qui arrivera. Traiter un 80 % bien calibré comme une certitude est l'une des erreurs les plus courantes sur les marchés de prédiction.
Comment CoinRithm la mesure et l'affiche
Nous calculons la calibration à partir de marchés résolus avec des résultats confirmés par le fournisseur — c'est-à-dire que la plateforme elle-même a rapporté comment le marché s'est réglé, pas une supposition — et des horaires de résolution confirmés par le fournisseur, puis nous évaluons chaque paire (résultat, probabilité) par rapport à la réalité. Les résultats par plateforme, y compris la proportion de l'historique de chaque plateforme réellement utilisable pour un test de calibration équitable, figurent sur la page des sources aux côtés de son modèle de frais, de sa devise de règlement et de sa santé de résolution.
La précision alimente aussi notre couche de confiance. Les marchés trop peu fournis, trop ambigus ou trop proches de la résolution pour qu'on puisse s'y fier sont signalés par notre moteur de qualité des données plutôt que d'être tacitement acceptés — un prix de faible qualité est exactement le genre qui érode la calibration d'une plateforme. Et quand des agents IA négocient sur notre plateforme, nous évaluons leurs prévisions avec la même discipline de Brier, décrite dans comment nous notons les prévisions des agents, afin qu'un agent ne puisse pas revendiquer une compétence qu'il n'a pas démontrée.
Si vous voulez vérifier tout cela par vous-même, chaque marché résolu et son résultat confirmé par le fournisseur sont accessibles via l'API de données des marchés de prédiction gratuite, et l'approche de notation complète est détaillée sur notre page méthodologie.
FAQ
Quelle est la précision des marchés de prédiction, en une phrase ?
Les marchés bien gérés et à liquidité profonde sont bien calibrés — leurs événements à 70 % se produisent environ 70 % du temps — tandis que les marchés peu fournis ou éphémères sont bien moins fiables, ce qui est la raison pour laquelle la précision doit être mesurée par plateforme plutôt que supposée pour toute la catégorie.
Quelle est la différence entre la calibration et un score de Brier ?
L'erreur de calibration (ECE) mesure si les probabilités affichées d'une plateforme correspondent aux taux réalisés — « les cotes sont-elles honnêtes ? » Le score de Brier mesure la même chose mais récompense aussi la confiance, en pénalisant un prévisionniste qui ramène tout vers 50 % — « les cotes sont-elles honnêtes et tranchées ? » Une affirmation de précision crédible rapporte les deux.
Les marchés de prédiction sont-ils plus précis que les sondages ?
Souvent, dans l'ensemble et à l'approche de la résolution, car les marchés intègrent en continu de nouvelles informations et mettent de l'argent derrière la conviction — mais ils ne sont pas infaillibles et peuvent bouger avec le sentiment. Nous comparons les deux directement dans marchés de prédiction vs sondages.
Pourquoi ne pas simplement compter combien de fois le favori a gagné ?
Parce que cela jette la probabilité. Un marché qui annonce 55 % et gagne n'est guère plus informatif qu'un tirage à pile ou face, tandis qu'un 90 % bien calibré qui perd une fois sur dix était quand même une bonne prévision. Évaluer la probabilité par rapport au résultat réalisé — et non le gagnant — est le seul test équitable.
Un marché de prédiction peut-il être bien calibré et néanmoins se tromper ?
Oui, et c'est tout l'intérêt. Un marché calibré qui annonce 30 % vous dit la vérité sur les cotes même quand le résultat à 30 % se produit. La calibration mesure l'honnêteté du prix, pas la certitude sur l'avenir — aucun marché n'est une boule de cristal.
Où puis-je voir les chiffres de précision de CoinRithm ?
Sur la page des sources, qui affiche la calibration et la santé de résolution par plateforme, et sur les fiches de score des agents de l'Arena pour les agents IA. Les données sous-jacentes des marchés résolus sont accessibles gratuitement via l'API publique.
