25 mei 2011- Symposium Statistical Auditing Slide 1

Compliance TestsRijmt

Pragmatiekop

Statistiek

Hein Kloosterman

Waarover gaat het?• Waarom over “tests of controls”

• Controleaanpak en “tests of controls”

• Statistiek en “tests of controls”

• Methodologie, onderzoek– Uitwerking ratio

• Vragen aan de deelnemers

• Statistiek?

• Tot slot

25 mei 2011- Symposium Statistical Auditing Slide 2

Waarom overTests of Controls

• Kantoren passen tabellen toe• Gebaseerd op statistiek?

• Proceduretest versus lijncontrole• Helder: organisatie moet beoordeeld

• Literatuur schiet vaak in statistiekmodus

• “Vaststellen” “control risk”• Voordeel: minder substantive tests

– Detailcontroles én– Cijferanalyses

25 mei 2011- Symposium Statistical Auditing Slide 3

Controleaanpak encompliancetests

Slide 4 25 mei 2011- Symposium Statistical Auditing

• Standaard beoordeling Interne Beheersing:• Vgl NVCOS 500 & 530: systeemgerichte deel

– Opzet: beschrijving plus interview– Bestaan: lijncontrole = cradle-to-grave-test– Werking:

• Verbandscontroles• Tests of Controls = Compliance tests• Waaronder: eigen waarneming

– Wanneer? Achteraf?– Hoeveel? Op basis van welke bronnen?

Statistiek en Compliance tests

• Als omvang werk met statistiek bepaald:– Statistische betrouwbaarheid

• Acceptable Risk of Overreliance

– Statistische onnauwkeurigheid• Tolerable Deviation Rate

– In combinatie met

• Expected Deviation Rate

• Ratio hiervoor niet in de literatuur– Ratio parameters bekend verondersteld?

25 mei 2011- Symposium Statistical Auditing Slide 5

MethodologieTests of controls (overzicht)

• Samenhang toetsing IB en statistiek

• Ratio en Transactiemodel

• Ratio en onderzoek jaarrekening

• Soll, “Soll”, Ist

• Toetsingsonderzoek

• Doel tests of controls

• Parafen

• Alternatief voor “over de schouder”?

25 mei 2011- Symposium Statistical Auditing Slide 6

MethodologieSamenhang toetsing IB en statistiek

• Tests of controls = toetsingsonderzoek– Gebruik maken van Popper, De Groot?

• Waar staat Compliance test voor?– Parafen aanwezig? Of meer?

• Zie b.v. NVCOS 315 Bijlage 2 over IB

• Betekenis van aantallen?

• Budget?

• Kwaliteit? Kwantiteit? Tegenstelling?

25 mei 2011- Symposium Statistical Auditing Slide 7

MethodologieRatio en Transactiemodel

Slide 8 25 mei 2011- Symposium Statistical Auditing

• Transactiemodel

Methodologie Ratio en onderzoek jaarrekening

25 mei 2011- Symposium Statistical Auditing Slide 9

Totale rechthoek: “jaarrekening als geheel”Deelrechthoeken: klassen transacties

Onvolledigheid transacties

MethodologieSoll, “Soll” en Ist

• Soll = transactie in de “real world”– Één transactie

• Ist = presentatie in financiële verantwoording– Verzameling van weergaven transacties– Aggregatieniveau

• Evident:– Soll niet rechtstreeks met Ist te verbinden

25 mei 2011- Symposium Statistical Auditing Slide 10

MethodologieToetsingsonderzoek

• Popper?– “I do not demand…”– Meting/waarneming moet mogelijk zijn

• De Groot?– Falsifiëren: verwijzing naar Popper– Methodologie

• Zoek ratio niet in statistiek• Zoek ratio wel in het eigenlijke vak

– Zijn vak is psychologie

– Wat moet worden gemeten?

25 mei 2011- Symposium Statistical Auditing Slide 11

MethodologieDoel tests of controls

• Ist = Soll– Stemt primaire vastlegging overeen Real World?– Ist: primaire vastlegging– Soll: Real World

• Controle achteraf:– Subsidiaire vastlegging i.o.m. Primaire vastlegging

• N.B. Waarnemen Real World is duur!• N.B. Onvervangbare Interne Controle!

25 mei 2011- Symposium Statistical Auditing Slide 12

MethodologieParafen?

• Vergelijken Primaire Vastlegging met Real World is duur:– Popper: “I do not demand ..” controleerbaar, dus– Real World verdampt:

• Primaire vastleggingen opwerken van Ist naar “Soll”• Waarheidsgehalte (verisimilitude) voldoende• Hoeveel?? Inclusief timing!

• Als primaire vastleggingen “Soll”, dan (pas)

• Subsidiair vergelijken met primair.

25 mei 2011- Symposium Statistical Auditing Slide 13

MethodologieAlternatief voor “over de schouder”?

• Logging?

• Werkverslagen?

• Verslag uit meerdere invalshoeken?– Vgl “controletechnische functiescheiding”– In samenhang met verbandscontroles (NL)

• Anders?

25 mei 2011- Symposium Statistical Auditing Slide 14

Vragen:• Hanteert iemand van u:

– Alternatief over de schouder meekijken– Tabel met hoeveelheid waar te nemen events

• Hoeveel waarnemingen– Overgang Real world naar primaire vastlegging– Subsidiair vergelijken met Primair

25 mei 2011- Symposium Statistical Auditing Slide 15

Statistiek?• Onnauwkeurigheid & aantallen

– Audit methodologie?– Vuistregels?– Budget?

• Betrouwbaarheid– Vast percentage?– Ook “risicoanalyse”?

25 mei 2011- Symposium Statistical Auditing Slide 16

Tot slot (1)

25 mei 2011- Symposium Statistical Auditing Slide 17

“Ist”

Tot slot (2)• Ratio compliance tests:

– Werking proces events naar primaire vastlegging

– Primaire vastleggingen van “Ist” naar “Soll”

• Ratio hoeveelheden– Niet statistiek– Wel “wat een gek ervoor overheeft”?– Ingesleten gewoonten?– Nut statistiek: random waarnemingen

25 mei 2011- Symposium Statistical Auditing Slide 18