Théorème de Bayes / Explorateur des faux positifs

comment la prévalence modifie la fiabilité d'un test positif

Chargement de la simulation interactive...

pourquoi la précision n'est que la moitié de l'histoire 🖖

La sensibilité et la spécificité décrivent le test ; la prévalence décrit la population avant le test. Le théorème de Bayes combine les deux. Quand la prévalence est faible, même un faible taux de faux positifs peut créer de nombreuses fausses alertes, car la plupart des personnes testées n'ont pas la maladie. C'est pourquoi un résultat de dépistage positif nécessite souvent une confirmation, alors que le même test peut être très convaincant dans un groupe à haut risque.

un test met à jour une croyance, il ne la remplace pas 🖖

Le théorème de Bayes est une règle pour réviser son opinion face à une preuve. On part d'une probabilité a priori — sa meilleure estimation avant le test, ici la prévalence — et le résultat la déplace vers le haut ou le bas jusqu'à une probabilité a posteriori. Un seul positif mène rarement droit à la certitude ; il multiplie les chances de départ au lieu de les effacer. À retenir : avant de se fier à un résultat, demandez d'abord quelle était la probabilité de départ.

le même piège a envoyé quelqu'un en prison 🖖

Confondre P(positif | maladie) avec P(maladie | positif) porte un nom au tribunal : le sophisme du procureur. Au procès de Sally Clark en 1999, le jury a entendu que deux morts subites du nourrisson dans une même famille avaient une probabilité de 1 sur 73 millions, et l'a pris pour la probabilité de son innocence. Ce sont des chiffres différents : le second ignore la rareté de l'alternative (un double meurtre). Sa condamnation a été annulée en 2003, et la Royal Statistical Society a condamné publiquement cet abus.

BAYES — UN RÉSULTAT POSITIF N'EST PAS LA MÊME CHOSE QU'ÊTRE MALADE

Quel cas de dépistage lisez-vous ?

Trois nombres décident de ce que signifie un test positif : la fréquence de la maladie, la capacité du test à la détecter, et sa propension à crier au loup. Sensibilité et spécificité décrivent le test ; la prévalence décrit la population — et c'est généralement la prévalence qui fait les dégâts. Raisonnez en fréquences naturelles plutôt qu'en pourcentages et la réponse cesse d'être contre-intuitive : imaginez 1000 personnes, comptez les vrais positifs, comptez les faux, comparez.

Maladie rare, excellent test — la plupart des positifs sont quand même faux PPV ≈ 9%
Maladie fréquente — la prévalence sauve un test plus faible PPV ≈ 51%
Prévalence modérée — et ce que vaut un négatif PPV ≈ 60%, NPV ≈ 99%
Sensibilité élevée, spécificité moyenne — le mauvais bouton PPV ≈ 29%

01

Maladie rare, excellent test — la plupart des positifs sont quand même faux

Ce que vous savez: Prévalence 0,1 %, sensibilité 99 %, spécificité 99 %. Le test est aussi bon qu'un test peut l'être ; la maladie est vraiment rare.

Résultat: PPV ≈ 9%

Exemple résolu: Sur 10 000 personnes : 10 sont malades et environ 10 sont positives ; 9990 ne le sont pas et 100 sont positives quand même → VPP = 10/110 ≈ 9 %

Ouvrir ce cas: maladie rare, test précis
Maladie rare, excellent test — la plupart des positifs sont quand même faux. Dix vrais positifs noyés parmi cent faux : la fréquence de base l'emporte. Prévalence 0,1 %, sensibilité 99 %, spécificité 99 %. Le test est aussi bon qu'un test peut l'être ; la maladie est vraiment rare.
Dix vrais positifs noyés parmi cent faux : la fréquence de base l'emporte.

02

Maladie fréquente — la prévalence sauve un test plus faible

Ce que vous savez: Prévalence 10 %, sensibilité 95 %, spécificité 90 %. Un test nettement moins bon, appliqué là où la maladie est réellement fréquente.

Résultat: PPV ≈ 51%

Exemple résolu: Sur 1000 personnes : 100 sont malades et 95 sont positives ; 900 ne le sont pas et 90 sont positives → VPP = 95/185 ≈ 51 %

Ouvrir ce cas: maladie plus courante
Maladie fréquente — la prévalence sauve un test plus faible. Même arithmétique, dix fois la prévalence : un positif vaut à présent presque un pile ou face. Prévalence 10 %, sensibilité 95 %, spécificité 90 %. Un test nettement moins bon, appliqué là où la maladie est réellement fréquente.
Même arithmétique, dix fois la prévalence : un positif vaut à présent presque un pile ou face.

03

Prévalence modérée — et ce que vaut un négatif

Ce que vous savez: Prévalence 5 %, sensibilité 85 %, spécificité 97 % : le profil d'un test antigénique rapide pendant une flambée.

Résultat: PPV ≈ 60%, NPV ≈ 99%

Exemple résolu: Sur 1000 : 50 infectés, 43 détectés et 7 manqués ; 950 indemnes, 29 signalés à tort → VPP = 43/72 ≈ 60 % et VPN = 922/929 ≈ 99 %

Ouvrir ce cas: type covid
Prévalence modérée — et ce que vaut un négatif. Un positif est un pile ou face légèrement biaisé ; un négatif est presque tranché. Prévalence 5 %, sensibilité 85 %, spécificité 97 % : le profil d'un test antigénique rapide pendant une flambée.
Un positif est un pile ou face légèrement biaisé ; un négatif est presque tranché.

04

Sensibilité élevée, spécificité moyenne — le mauvais bouton

Ce que vous savez: Prévalence 2 %, sensibilité 99 %, spécificité 95 %. Presque aucun consommateur n'échappe au test, mais une personne saine sur vingt est accusée.

Résultat: PPV ≈ 29%

Exemple résolu: Sur 1000 : 20 consommateurs, 20 détectés ; 980 non-consommateurs, 49 signalés quand même → VPP = 20/69 ≈ 29 %, donc sept positifs sur dix sont innocents

Ouvrir ce cas: dépistage de drogues
Sensibilité élevée, spécificité moyenne — le mauvais bouton. Vingt vrais consommateurs contre quarante-neuf accusations infondées : c'est la spécificité qu'il faut corriger. Prévalence 2 %, sensibilité 99 %, spécificité 95 %. Presque aucun consommateur n'échappe au test, mais une personne saine sur vingt est accusée.
Vingt vrais consommateurs contre quarante-neuf accusations infondées : c'est la spécificité qu'il faut corriger.
Références (1)

Problème entièrement résolu

  1. Un deuxième résultat positif pour une prévalence de 0,1 % 5 étapes

    Un second résultat positif. Il s'agit d'une prévalence de 0,1 % avec une sensibilité de 99 % et une spécificité de 99 % — une affection rare et un test excellent, où un seul résultat positif constitue notoirement une preuve faible. Calculez ce que vaut un second résultat positif indépendant.

    1. C'est sous forme de cote, et non de probabilité, que les preuves se multiplient. Une personne sur mille présente l'affection, la position de départ est donc de 1 contre 999 — et c'est ce 999, non l'un ou l'autre cadran, qui fait tout le dégât.

    2. Le rapport de vraisemblance compare la fréquence d'apparition d'un résultat positif dans chaque groupe. Les deux valeurs sont lues sur les cadrans : 99 % des personnes atteintes de l'affection sont testées positives, et une spécificité de 99 % laisse 1 % de toutes les autres personnes être également testées positives.

    3. Multiplier la cote a priori par le rapport de vraisemblance constitue toute la règle de Bayes sous cette forme, et une cote de a contre b se reconvertit en a/(a+b). Un facteur de 99 représente une preuve considérable, qui s'incline pourtant encore, ayant commencé avec un retard de 999.

    4. Un second test commence là où le premier s'est achevé — la cote a posteriori d'un résultat devient la cote a priori du suivant. Rien concernant le test lui-même n'a changé, ainsi le même facteur de 99 s'applique, cette fois à une cote qui n'est plus sans espoir.

    5. Cette étape supposait que les deux résultats positifs étaient indépendants, ce que la répétition du même test échoue précisément à offrir. Si ce qui a signalé une personne saine la première fois — une protéine à réaction croisée, un échantillon mal étiqueté — la signale à nouveau la moitié du temps, les faux positifs ne diminuent que très peu.

    Réponse

    L'outil affiche 9,0 % pour un seul résultat positif, issu d'une substitution qui donne 0,090164 — soit les mêmes 99/1098. Deux résultats positifs indépendants amènent la probabilité à 90,75 % et trois à 99,90 %, car le facteur de 99 s'applique à chaque fois tandis que la cote a priori de 999 contre 1 n'est payée qu'une seule fois. C'est l'arithmétique sous-jacente aux tests de confirmation, et l'étape 5 en est la clause restrictive : une répétition corrélée aboutit à 16,4 %, à peine plus convaincant que le résultat unique qu'elle était censée confirmer. Le second test doit donc échouer différemment du premier — une molécule cible différente, un laboratoire différent, un mécanisme différent — faute de quoi la multiplication relève de la fiction. Le nombre à retenir est 99 : la sensibilité divisée par le taux de faux positifs représente tout le poids probant d'un test, et il s'agit d'un multiplicateur de cote plutôt que d'une réponse.

Parcours

Les probabilités a priori et leur origine

Mène à Billard de Bayes l'actualisation où chaque donnée d'entrée est mesurable.

Exemples de problèmes

  • maladie rare, test précis - prev=0.1%, test précis à 99% -> VPP de seulement 9% : la plupart des positifs sont de fausses alertes
  • maladie plus courante - prev=10% -> la VPP grimpe à 51% ; la prévalence est le levier caché
  • type covid - Test rapide COVID à 5% de prévalence -> VPP ~ 60%
  • dépistage de drogues - Dépistage de drogue à 2% de prévalence -> VPP ~ 29% malgré une sensibilité de 99%