Problèmes entièrement résolus
-
Effectif attendu et contribution au khi-deux pour 24 des 200 notes de frais 6 étapes
Un auditeur extrait 200 notes de frais et constate que 24 d'entre elles commencent par le chiffre 1. Ce résultat est-il cohérent avec la loi de Benford ? Calculez l'effectif attendu, la contribution de ce seul chiffre au khi-deux, et ce qu'exigerait le test complet avant que vous ne puissiez agir.
-
Commencez par regarder ce que prévoit la loi. La probabilité d'un 1 en premier chiffre est de log₁₀(1 + 1/1) = log₁₀ 2 = 0,30103. Sur 200 réclamations, l'effectif attendu s'élève donc à 0,30103 × 200.
-
Cela représente 60,2 réclamations. L'auditeur en a trouvé 24. Le déficit s'élève à 36,2 notes de frais. Il frappe précisément le chiffre qui, selon la loi, devrait dominer très largement.
-
Le khi-deux additionne un terme par chiffre, chacun valant (observé − attendu)² ÷ attendu. Pour le premier chiffre 1, ce terme vaut (24 − 60,21)² ÷ 60,21.
-
La valeur (−36,21)² donne 1 310,9, et la division par 60,21 aboutit à 21,77. Le test complet possède huit degrés de liberté et sa valeur critique à 5 % s'établit à 15,507. Ce seul chiffre a donc déjà poussé la statistique au-delà du seuil de rejet.
-
Cela signifie que l'arithmétique est terminée, mais pas la déduction. Le khi-deux augmente avec la taille de l'échantillon. Les mêmes proportions sur 2 000 réclamations donneraient un terme dix fois supérieur, et un vaste ensemble de données authentiques pourrait échouer au test pour un écart que personne ne qualifierait de fraude. C'est pour cette raison que les auditeurs s'appuient plutôt sur l'écart absolu moyen, qui ne croît pas avec n.
-
Il faut donc en conclure que ces 200 demandes ne suivent pas la distribution des premiers chiffres prévue par la loi de Benford. Quant à savoir ce que cela révèle, les chiffres ne peuvent pas le dire : dans une entreprise où les dépenses inférieures à 999 £ sont approuvées sans contrôle supplémentaire, les nombres commençant par neuf s’accumulent pour une raison parfaitement légitime. Il en va de même lorsqu’un montant journalier fixe est remboursé.
Réponse
Attendez-vous à 60,2 réclamations commençant par 1 ; 24 ont été trouvées. Ce seul chiffre contribue à hauteur de 21,77 à une statistique dont la valeur critique à 5 % est de 15,507. Le test conclut au rejet, et rejeter n'est pas synonyme de détecter. La loi de Benford sert de filtre pour indiquer à l'auditeur où chercher. Depuis les travaux fiscaux de Mark Nigrini dans les années 1990, chaque utilisation publiée dans ce cadre considère un échec comme une excellente raison d'ouvrir le dossier, et non comme une conclusion en soi. L'outil affiche l'écart absolu moyen à côté du khi-deux précisément pour cette raison. Passez à un jeu de données de 5 000 valeurs et regardez le khi-deux s'envoler pendant que l'écart bouge à peine.
-
-
Un khi-deux de 0,2, et pourquoi c'est celui-là qui est suspect 6 étapes
Chargez le préréglage Fibonacci. Le khi-deux affiche 0,2 face à une valeur critique de 15,507 à 5 %, la suite passe donc le test très largement. Calculez la probabilité d'un accord aussi bon, puis décidez de ce qu'un khi-deux très faible devrait dire à un auditeur.
-
Commencez par comparer les effectifs. Mille nombres de Fibonacci placent 301 valeurs dans la case du premier chiffre 1, contre 301,03 pour la loi, et le plus grand désaccord parmi les neuf cases porte sur le chiffre 7 : 56 observés contre 57,99 attendus. Ce n'est pas proche. C'est presque exact.
-
Un khi-deux à huit degrés de liberté a pour moyenne 8 et pour écart-type 4. La carte arrondit à 0,2 ; derrière se cache 0,1695, soit deux écarts-types sous la moyenne d'une statistique qui ne peut pas descendre sous zéro.
-
La queue inférieure a ici une forme close, car huit degrés de liberté réduisent la gamma incomplète à quatre termes. Aucune table n'est nécessaire.
-
En y portant 0,1695, on obtient 2,0 × 10⁻⁶. Environ un échantillon sur un demi-million colle aussi bien à la loi. Basculez le jeu de données sur l'échantillon à répartition logarithmique uniforme, de même taille, c'est-à-dire sur le mécanisme lui-même tiré au hasard : la carte affiche 5,6.
-
L'explication tient en une phrase : les nombres de Fibonacci n'ont jamais été un échantillon. log₁₀ Fₖ vaut k log₁₀ φ moins une constante, si bien que les premiers chiffres sont décidés par les parties fractionnaires des multiples de 0,2089876…, et ce nombre est irrationnel. Weyl a démontré en 1916 qu'une telle suite se répartit uniformément.
-
Et elle se répartit plus uniformément que le hasard n'y parvient. Les trous laissés par une rotation de ce type se resserrent comme log N sur N, tandis que N tirages aléatoires laissent des trous d'ordre 1/√N, et le khi-deux croît comme N fois le carré de ce trou. Mille termes déterministes battent donc mille termes aléatoires de très loin, et 0,17 est le visage de cet écart.
Réponse
Environ un sur 500 000 sous n'importe quel modèle aléatoire, ce qui fait de cet accord la preuve que ces données n'ont pas été échantillonnées du tout. Un test du khi-deux pose une seule question : les données s'écartent-elles de la loi plus que le hasard ne l'autorise ? Il n'a aucun moyen de dire que des données sont trop proches, et la ligne de verdict est la même pour 0,17 que pour 8.
Pour un auditeur, cela renverse la lecture habituelle. Un grand livre qui suit Benford à deux décimales près a un problème, et c'est celui que R. A. Fisher a soulevé en 1936 à propos des données de pois de Mendel : l'accord avec la théorie y était plus étroit que l'échantillonnage ne peut le produire. Qui a lu quelque chose sur la loi de Benford et fabrique ensuite des chiffres à partir d'elle laisse cette signature, plus facile à repérer que la fraude pour laquelle le test a été conçu. Une comptabilité honnête arrive avec les bords irréguliers d'un vrai échantillon ; mille nombres de Fibonacci, non. -
Références (3)
- The observation, made fifty-seven years before the law was named after somebody else: S. Newcomb, "Note on the Frequency of Use of the Different Digits in Natural Numbers." American Journal of Mathematics 4 (1881), p. 39.
- Why the law is scale-invariant, which is the property the unit switch on this page tests: T. P. Hill, "A Statistical Derivation of the Significant-Digit Law." Statistical Science 10 (1995).
- The paper the law is named for, and the one that first checked it against real data: F. Benford, "The Law of Anomalous Numbers." Proceedings of the American Philosophical Society 78 (1938), 551-572.