Pratiquez la calibration probabiliste en suivant vos prédictions

Attribuez des estimations de probabilité explicites à vos prédictions et suivez si elles se réalisent au bon taux.

Why it works

La calibration — la correspondance entre la confiance affichée et l'exactitude réelle — est une compétence qui s'apprend. Les personnes qui suivent leurs prédictions dans le temps et observent à quelle fréquence leurs affirmations à 70 % de confiance se réalisent réellement développent des boucles de rétroaction qui corrigent la sur- ou sous-confiance systématique. Sans cette rétroaction, le sentiment de confiance généré par une information vivante persiste non corrigé.

How to do it

1. Pour toute prédiction que vous faites, attribuez une probabilité en pourcentage : « Je pense qu'il y a 70 % de chances que X se produise. »
2. Enregistrez la prédiction et le résultat.
3. Après 20 à 30 prédictions, vérifiez votre calibration : vos prédictions à 70 % se réalisent-elles environ 70 % du temps ?

Données probantes

La recherche sur la calibration (y compris les travaux de Tetlock sur les superprévisionnistes) montre que suivre les prédictions avec des probabilités explicites améliore significativement l'exactitude au fil du temps grâce à la correction d'erreur par rétroaction. (observational)

Sources

• Tetlock & Gardner (2015), Superforecasting — calibration training and improvement across thousands of predictions

Erreur fréquente

Attribuer des probabilités vagues (« assez probable ») plutôt que des chiffres précis, ce qui empêche toute vérification de calibration significative car la prédiction est infalsifiable.