Statistical Auditing (26)

Hoe lang al?

De stuurgroep (research) Statistical Audit bestaat inmiddels meer dan 20 jaar. De stuurgroep en zijn leden zijn in die jaren betrokken geweest bij tal van onderzoeken. In 2000 hebben Ed Broeze en ondergetekende een inventarisatie gemaakt van het onderzoek tot dan toe.

Hein Kloosterman

Het artikel dat wij schreven is destijds niet gepubliceerd. Daarom stellen wij het overzichtsartikel - zo heet het in de stuurgroep - nu via een link op deze site beschikbaar.

Met deze column willen Ed en ik niet alleen de aandacht op het bewuste artikel vestigen, wij willen graag lezers ermee warm maken voor het vakgebied.

In het overzichtsartikel is een aantal onderzoeksdoelstellingen opgesomd en zijn de onderzoeksresultaten ter zake kort beschreven.

Het artikel behandelt de volgende onderzoeken:

  • de toedeling van controletolerantie van het geheel aan delen van de verantwoording (ook: allocatieprobleem);
  • onderzoeksresultaten deelpopulaties samenvoegen, vertalen, naar resultaten over de samengestelde populatie;
  • aantoonbaarheid conservatisme van de zogenoemde 'Stringer Bound';
  • onderzoek naar methoden die het conservatisme van de 'Stringer Bound' kunnen reduceren;
  • voorwaarden om uitspraken in geld te doen op basis van steekproeven op posten.

Toedeling controletolerantie

Onder 'normale' omstandigheden is het toedelen van controletolerantie aan deelpopulaties niet nodig. Blokdijk publiceerde in het MAB (juli 1996) daar een artikel met bijpassend bewijs over. Het niet toedelen leverde een enorme verbetering, vereenvoudiging, voor het toepassen van geldsteekproeven.

Samenvoegen onderzoeksresultaten

Steele en Van Batenburg gingen anders dan hun voorgangers onderscheid maken in heterogene en homogene deelverzamelingen. Als er sprake is van heterogene deelverzamelingen, waarvoor bewijs moet worden geleverd, bieden zij een aggregatiemethode die leidt tot aanzienlijk lagere foutbovengrenzen voor het totaal. Het effect ervan is dat de accountant vaker tot goedkeuren zou kunnen komen, dan bij de methoden van de tot dan toe bekende literatuur het geval was.

Ook Schapendonk-Maas deed onderzoek naar de mogelijkheden van samenvoegen. Zij liet zien dat er meerdere voldoende conservatieve evaluatiemethoden zijn voor geldsteekproeven. De intuïtieve methode van Stringer is een van de meest conservatieve (leidt niet te snel tot goedkeuren).

Conservatisme Stringer Bound en wiskunde

Van Zuijlen en Pap hebben meerdere onderzoeken gedaan om het gedrag van de Stringer Bound wiskundig in de greep te krijgen. Een belangrijke conclusie van een van hun onderzoeken is dat onbetrouwbaarheden (steekproefrisico's) van 50 procent en meer leiden tot een dekkingspercentage dat ligt onder de gewenste betrouwbaarheid. Zij leverden wiskundig bewijs voor de stelling dat - mits de betrouwbaarheid groter is dan 50 procent - de Stringer Bound conservatief, voorzichtig, genoeg is.

Methoden reduceren conservatisme Stringer Bound

Er zijn meerdere onderzoeken geweest waarbij onderzocht is of en hoe de foutbovengrens minder conservatief kan worden bepaald dan met de Stringer Bound. Zonder hier verder in te gaan op die (vier) onderzoeken is de conclusie dat er (in ieder geval) drie valide methoden zijn om de bovengrenzen minder conservatief uit te rekenen dan met de Stringer Bound.

Uitspraken in geld na steekproeven trekken op posten

De conclusie uit onderzoek van Willemsen is dat postensteekproeven om een foutbovengrens in een financiële populatie te schatten niet toereikend zijn. De methoden als de verschil- en regressieschatter zijn bruikbaar als aan de voorwaarden om die te kunnen gebruiken is voldaan; populair gezegd is dat het geval als de fouten de onderzoeker om de oren vliegen.

Ook na 2000 is er nog onderzoek in samenhang met de Stuurgroep Statistical Audit gedaan. Zoals bijvoorbeeld het onderzoek van Ed Broeze naar risicoanalyse door accountants en het onderzoek van Jan Wille naar de relatie accountantscontrole en Bayesiaanse statistiek. In een volgende column in gaan we in op deze en andere actuele onderzoeken (bijvoorbeeld het artikel van De Swart, Wille en Majoor in het MAB van oktober 2013) en enkele toepassingen van steekproeven en andere statistiek in de (controle-) praktijk.

Stuurgroep Statistical Auditing

De Stuurgroep Statistical Auditing is verbonden met het Limperg Instituut en heeft als doel 'het bevorderen van het correcte (effectief en efficiënt) gebruik van statistische methoden en technieken bij accountantscontroles en daarmee verwante controles op financiële verantwoordingen en overzichten'.

Hein Kloosterman RE RA, gepensioneerd adviseur IT-audit en Statistical Audit. Lid van de Stuurgroep Statistical Auditing.

Gerelateerd

2 reacties

Hein Kloosterman

Beste Frits, Beter laat dan nooit moet je maar denken: toch nog een reactie. Ik signaleer het gebruik van statistische steekproeven vooral bij bijzondere onderzoeken. Bij 'gewone' onderzoeken winnen data-analyses (cijferanalyses) het vaak van detailonderzoek. De neiging tot overschatten van het (eigen) professional judgement speelt er een rol bij. Opleidingen zullen ook wel een rol spelen (nooit geleerd is nooit gedaan). In die zin is het weinig of niet toepassen van steekproeven dus moeilijk vermijdbaar. Methodologisch is het kunnen toepassen van steekproeven nodig. Niet ieder tekstboek dat accountants in opleiding gebruiken hanteert de methodologie expliciet. Zo spiltst Knechel het Audit Risk Model (ARM) en het toepassen van steekproeven in twee hoofdstukken. Terwijl het ARM is gebaseerd op het toepassen van steekproeven (en het 'zacht' aggregeren van evidence). Wat ik lees is dat de Europese Rekenkamer en de Nederlandse Belastingdienst het toepassen van steekproeven in hun audit approach hebben opgenomen. Ook adviseurs die werk verrichten in relatie tot Horizontaal Toezicht passen steekproeven toe om te kijken of het Tax Control Framework van hun klant werkt. Ik vergeet waarschijnlijk nog een heleboel accountants die steekproeven toepassen in de sfeer van overheidsaccountancy. Dus: de belangstelling voor steekproeven in de controle neemt niet af, die voor steekproeven in de jaarrekeningcontrole blijft nog achter. Ik ben een optimist.

Frits Hoek RA

Misschien had de titel moeten luiden "Hoe lang nog?". Ik was vanaf circa 1965 in mijn toenmalig kantoor Van Dien+Co intensief betrokken bij het ontwikkelen van steekproef- technieken en - toepassingen. De voor bijna iedereen goed te begrijpen 'guldenrangnummermethode' van Van Heerden trok steeds meer controle-accountants over de streep. En de komst van audit software maakte vervolgens het toepassen van steekproeven in geautomatiseerde omgevingen aantrekkelijk en relatief eenvoudig uit te voeren. Het is mijn waarneming echter dat naarmate in de afgelopen decennia de controle-aanpak steeds minder "data gericht" is geworden, de belangstelling voor steekproeven in de controle een aflopende zaak is. Jammer? Of onvermijdelijk?

Reageren op een artikel kan tot drie maanden na plaatsing. Reageren op dit artikel is daarom niet meer mogelijk.

Aanmelden nieuwsbrief

Ontvang elke werkdag (maandag t/m vrijdag) de laatste nieuwsberichten, opinies en artikelen in uw mailbox.

Bent u NBA-lid? Dan kunt u zich ook aanmelden via uw ledenprofiel op MijnNBA.nl.