Ülesanded täielikult lahendatud
-
Oodatav arv ja hii-ruut panus 24 kulutšekile 200-st 6 sammu
Audiitor võtab ette 200 kuludokumenti ja avastab, et neist 24 algavad numbriga 1. Kas see on Benfordi seadusega kooskõlas? Arvuta välja oodatav kogus, selle ainsa numbri panus hii-ruudu väärtusesse ja mis peaks juhtuma terve testiga, enne kui selle pinnalt mingeid järeldusi teha saaks.
-
Alusta sellest, mida seadus eeldab. Tõenäosus, et arv algab 1-ga, on log₁₀(1 + 1/1) = log₁₀ 2 = 0,30103. Seega on 200 dokumendi peale oodatav kogus 0,30103 × 200.
-
See teeb 60,2 dokumenti. Audiitor leidis neid aga 24. Puudu jääb 36,2 dokumenti ning see puudujääk on numbris, mis peaks seaduse kohaselt pika puuga kõige levinum olema.
-
Hii-ruut lisab iga numbri kohta ühe liikme kujul (vaadeldud − oodatud)² ÷ oodatud. Esimese numbrina esineva 1 puhul on see liige (24 − 60,21)² ÷ 60,21.
-
(−36,21)² on 1310,9 ning jagamine 60,21-ga annab 21,77. Kogu testil on kaheksa vabadusastet ja selle 5% kriitiline väärtus on 15,507. Juba see üksik number üksi on lükanud statistiku üle tagasilükkamise piiri.
-
See tähendab, et arvutustega on ühel pool, aga järelduste tegemisega mitte. Hii-ruut kasvab koos valimiga. Samad proportsioonid 2000 dokumendi juures annaksid kümme korda suurema liikme. Nii võib suur ja aus andmestik kukkuda testis läbi kõrvalekalde tõttu, mida keegi ei nimetaks pettuseks. Just sel põhjusel viitavad audiitorid hoopis keskmisele absoluuthälbele, mis ei kasva koos n-iga.
-
Aus järeldus on, et nende 200 hüvitamistaotluse esinumbrite jaotus ei vasta Benfordi seaduse ennustusele. Millele see viitab, ei saa numbrite põhjal otsustada: ettevõttes, kus kinnitamispiir on 999 £, tekib suur hulk üheksaga algavaid summasid täiesti süütul põhjusel. Sama juhtub ka siis, kui hüvitist makstakse kindla päevamäära alusel.
Vastus
Oodatav hulk on 60,2 dokumenti, mis algavad 1-ga. Reaalselt leiti neid 24. See number üksi lisab statistikule 21,77 ning statistiku 5% kriitiline väärtus on 15,507. Test lükkab andmed tagasi. Tagasilükkamine pole aga veel avastamine. Benfordi seadus on filter, mis näitab audiitorile, kuhu vaadata. Iga avaldatud juhtum selle kasutamisest taolises rollis, alates Mark Nigrini maksualastest töödest 1990. aastatel, käsitleb testi põrumist põhjusena kausta avamiseks, mitte lõpliku avastusena iseeneses. Tööriist kuvabki keskmist absoluuthälvet hii-ruudu kõrval just sel põhjusel. Vaheta andmestik 5000 peale ja jälgi, kuidas hii-ruut muudkui kasvab, samas kui hälve vaevu liigub.
-
-
Hii-ruut 0,2, ja miks just see on kahtlane 6 sammu
Laadi eelseadistus Fibonacci. Hii-ruut näitab 0,2, kui 5% kriitiline väärtus on 15,507, nii et jada läbib testi mängleva kergusega. Arvuta välja, kui tõenäoline on niivõrd hea kokkulangevus, ja otsusta seejärel, mida peaks väga väike hii-ruut audiitorile ütlema.
-
Võrdle kõigepealt loendeid. Tuhat Fibonacci arvu paigutavad 1-ga algavate lahtrisse 301 väärtust, kui seadus ootab 301,03, ja suurim erinevus üheksast lahtrist on numbri 7 juures: 56 vaadeldut 57,99 oodatu vastu. Lähedane pole siin õige sõna. See on peaaegu täpne.
-
Kaheksa vabadusastmega hii-ruudu keskväärtus on 8 ja standardhälve 4. Kaart ümardab 0,2-ni, tegelik väärtus selle taga on 0,1695, ja see jääb kaks standardhälvet allapoole sellise statistiku keskväärtust, mis nullist väiksem olla ei saagi.
-
Alumisel sabal on siin kinnine kuju, sest kaheksa vabadusastet tõmbab mittetäieliku gammafunktsiooni nelja liikme peale kokku. Tabelit pole vaja.
-
Pane 0,1695 sisse ja välja tuleb 2,0 × 10⁻⁶. Umbes üks valim poolest miljonist sobitub seadusega nii hästi. Vaheta andmestik sama suure logaritmiliselt ühtlase jaotuse vastu, mis on juhuslikult tõmmatud mehhanism ise, ja kaart näitab 5,6.
-
Seletus on lihtne: Fibonacci arvud polnud kunagi valim. log₁₀ Fₖ on k log₁₀ φ miinus konstant, seega otsustavad esinumbrid ära arvu 0,2089876… kordsete murdosad, ja see arv on irratsionaalne. Weyl tõestas 1916. aastal, et selline jada laotub ühtlaselt laiali.
-
Ja laotub ühtlasemalt, kui juhuslikkus hakkama saab. Sellise pöörde jäetud lüngad kahanevad nagu log N üle N, samas kui N juhuslikku tõmmet jätavad lünki suurusjärgus 1/√N, ning hii-ruut käib nagu N korda selle lünga ruut. Tuhat determineeritud liiget löövad seetõttu tuhandet juhuslikku suure varuga, ja 0,17 ongi see, milline niisugune varu välja näeb.
Vastus
Umbes üks 500 000-st mis tahes juhusliku mudeli järgi, mis teeb sellest kokkulangevusest tõendi, et neid andmeid pole üldse valimina kogutud. Hii-ruudu test küsib ühte asja: kas andmed on seadusest kaugemal, kui juhus lubab? Öelda, et andmed on liiga lähedal, ei ole tal mingit võimalust, ja otsuse rida on 0,17 juures täpselt seesama mis 8 juures.
Audiitori jaoks pöörab see tavapärase lugemise pea peale. Pearaamat, mis langeb Benfordiga kokku kahe kümnendkoha täpsusega, on hädas, ja see on seesama häda, mille R. A. Fisher tõstis 1936. aastal üles Mendeli hernevaatluste kohta: kokkulangevus teooriaga oli parem, kui valimi võtmine üldse tekitada suudab. Keegi, kes on Benfordi seadusest lugenud ja numbrid selle järgi genereerib, jätab täpselt sellise jälje, ja seda on lihtsam märgata kui pettust, mille tarvis test ehitati. Ausad raamatupidamised saabuvad päris valimi sakiliste servadega, tuhat Fibonacci arvu aga mitte. -
Allikad (3)
- The observation, made fifty-seven years before the law was named after somebody else: S. Newcomb, "Note on the Frequency of Use of the Different Digits in Natural Numbers." American Journal of Mathematics 4 (1881), p. 39.
- Why the law is scale-invariant, which is the property the unit switch on this page tests: T. P. Hill, "A Statistical Derivation of the Significant-Digit Law." Statistical Science 10 (1995).
- The paper the law is named for, and the one that first checked it against real data: F. Benford, "The Law of Anomalous Numbers." Proceedings of the American Philosophical Society 78 (1938), 551-572.