Jan Bouwens

De wereld is complex en de mens is dat ook. Eenvoudige verklaringen vormen vaak illusies, dus blijf vragen naar hard bewijs, betoogt Jan Bouwens.

Discussie Column

De eenvoud van de leugen versus de complexiteit van de waarheid

Als je vlees eet, ben je een agressieve hufter en als je voor je een verklaring afgeeft tekent voor echtheid, spreek je vaker de waarheid dan wanneer je de handtekening voor echtheid onder je verklaring zet.  Leugens of waar? Recent werd de wereld opgeschrikt door de leugen van de eenvoud. Ariely, de leugengoeroe, heeft zelf een leugen de wereld in geholpen. Mijn oproep: accountants, wantrouw eenvoudige verklaringen van managers en academici!

Diederik Stapel werd in de herfst van 2011 onttroond als wereldberoemd onderzoeker, nadat hij nog in de zomer van dat jaar door honderden collega's het podium op werd geapplaudisseerd voor zijn verdiensten. Het bleek dat hij de resultaten van zijn onderzoek baseerde op door hem zelf gefabriceerde gegevens. Hij ging zelfs zover dat hij onder het mom van dataverzameling bij een kinderpopulatie zijn assistenten opdracht gaf zijn kofferbak te vullen met snoepgoed. Stapel noch de snoep bereikten ooit de kinderen. In plaats daarvan deed Stapel zich tegoed aan het snoep, opdat het werk van zijn assistenten niet helemaal voor niks was gedaan. Hij viel door de mand doordat wakkere assistenten zich gingen afvragen of de bevindingen wel op echte data waren terug te voeren. Zo bleek de conclusie dat vleeseters "egoïstische hufters" zijn te berusten op fraude. Stapel had de data, waarop de resultaten waren gebaseerd, verzonnen.

Afgelopen maand werd het werk van een volgende wereldberoemde experimentele onderzoeker naar het land der fabelen verwezen. Dan Ariely publiceerde in 2012 met collega's de studie 'Signing at the beginning makes ethics salient and decreases dishonest self-reports in comparison to signing at the end' in the Proceedings of the National Academy of Sciences (PNAS, officieel orgaan van de National Academy of Sciences NAS). Het artikel werd destijds geaccepteerd voor publicatie door Nobelprijswinnaar Daniel Kahneman (bekend van 'thinking fast and slow').

Het artikel van Ariely bestaat uit drie deelstudies, waarvan er twee een labexperiment bevatten en de derde deelstudie bij een verzekeringsmaatschappij werd uitgevoerd. De eerste twee deelonderzoeken werden onder leiding van Harvard professor Max Bazerman uitgevoerd, terwijl Dan Ariely de data bij de verzekeringsmaatschappij verzamelde. Wanneer een nieuwe polis wordt uitgegeven, verstrekt elke klant informatie over de exacte huidige kilometerstand van alle auto's die onder hun polis zijn verzekerd. Ariely legde de verzekernemers een formulier voor, waarin zij bovenaan het formulier verklaarden de waarheid te zullen spreken, terwijl hij in een tweede formulier de verzekernemer aan het einde van het formulier liet tekenen voor de ware opgave van de afgelegde kilometers. Het onderzoek claimt dat mensen die vooraf tekenen eerlijker zijn in de opgave van de afgelegde kilometers, dan degenen die achteraf tekenen.

Nu laat een analyse van Leif Nelson, Joe Simmons and Uri Simonsohn een aantal onverklaarbare onregelmatigheden zien, die wijzen op datafraude.

Zo blijkt in de twee tijdvakken die worden vergeleken dat evenveel mensen 40.000, 20.000, 10.000 en 500 mijl te hebben gereden. Dat is een statistisch welhaast onmogelijke uitkomst, tenzij het tweede tijdvak met een datagenerator werd gefabriceerd. Slechts een deel van de data is afgerond, terwijl het ontbreken van afronding duidt op een datagenerator. De verdediging van Ariely is dat hij de data van de verzekeringsmaatschappij kreeg en hij verder geen invloed had op data. Maar uit emailverkeer met co-auteur Nina Mazar blijkt dat hij wel degelijk aan de data heeft gewerkt. Zij verklaart: "I deeply regret that the 2012 paper was published and that others have spent time, effort, and money trying to implement or replicate the reported results. But I am genuinely pleased that the data fabrication has come to light and the scientific record is being corrected."

Tenzij Ariely met een overtuigender verklaring komt, is hij na Stapel de tweede goeroe die van zijn voetstuk valt.

Zowel Stapel als Ariely (ze doceerden beide ethiek!) waren veelgevraagd vanwege hun succes. Ariely was zelfs adviseur van president Obama. Managers lopen weg met hun kant-en-klaar-inzichten en er komt (kwam) geen einde aan hun aantrekkingskracht. Alles dat je moet weten als manager wordt in hapklare brokken gepresenteerd. Maar spreken zij de waarheid?

Ik wil alle accountants die dit lezen oproepen terug te gaan naar Kahneman. Er bestaan geen inzichten waarover men niet ook ZELF wil nadenken. Stapel loog toen hij zei dat vleesminnaars agressieve hufters zijn. Ariely spreekt onzin, als hij beweert dat het wat uitmaakt of mensen voor of na een verklaring hun handtekening zetten. Vele onderzoeken na hem vonden geen resultaat, waaronder zijn co-auteurs Lisa Shu Max Bazarman en Francseca Gino.

Beste accountants, trap niet in de val van de soundbites van goeroes. Denk aan Bernard Madoff en zijn rendementen, denk aan Cees van der Hoeven die de functies van ceo en cfo gelijktijdig zou kunnen bezetten, denk aan Frank Oranje met zijn rimpelloze reputatie. Vertrouw geen eenvoudige verklaringen en plaats mensen niet op een voetstuk als zij makkelijk verteerbare antwoorden hebben. Zulke antwoorden zijn slechts zelden waar! Benader onderzoekers en managers die antwoorden die uitblinken in eenvoud met diepgaande vragen.

Er bestaan geen simpele oplossingen en geen simpele verklaringen voor fenomenen. De wereld is complex en de mens is dat ook. Mensen hebben de voorkeur voor eenvoudige verklaringen, maar deze vormen vaak illusies. Ze zijn te mooi om waar te zijn! Think slow met Khaneman en wees sceptisch bij alle eenvoudige verklaringen die aan je worden gepresenteerd door managers en academici. Bedenk dat zelfs Kahneman viel voor de status van Ariely, toen hij de paper van Ariely en collega's accepteerde voor publicatie. Blijf vragen naar hard bewijs!

Wat vindt u van deze column?

Reageer

Jan Bouwens is hoogleraar accounting UvA en research fellow University of Cambridge.

13 reacties

Ron Heinen

Wanneer je op https://pubpeer.com/ zoekt naar Ariely dan krijg je een toelichting op problemen in de publicaties van Ariely.

Ron Heinen

@Jan Bouwens: Op https://retractionwatch.com/ is wat achtergrond info te vinden.

Jan Bouwens

Dank je Ron. Toch ook nog even richting management. Het is nog maar pas gebeurd dat een collega van me weigerde om sound bites te geven op een PE course. De vervanger van mijn collega is geen academicus en deze geeft graag sound bites en doet dat op RED talk niveau. Dan denk ik, wat is nu precies het doel van PE educatie, is dat sound bites produceren of inhoud? En hoe zit het dan met het kweken van de skeptische houding? In rook opgegaan?

Ron Heinen

Aansluitend op deze column is het informatief dat afgelopen jaren meer dan 2000 promotieonderzoeken en verdedigingen ervan zijn onderzocht.

Wat achtergrond info hiervan is te bekijken op:

https://www.math4sci.com/ndax-quantum-system-secure-client/

Hierbij zijn vele problemen aan het licht gekomen.

Mede naar aanleiding van de analyses van de problemen bij de onderzoeken zijn er nieuwe gedragsregels verplicht voor alle onderzoek in NL aan universiteiten, hoge scholen en onderzoeksinstellingen.

Aansluitend op het aangehaalde geval Diederik Stapel in het artikel is bijvoorbeld het bekijken van de onderstaande link informatief:

https://www.youtube.com/watch?v=SH9rmR-ByHk

Carel Verdiesen

En jij, Jan, dank voor AL jouw bijdragen. Ik sla er geen over...

Jan Bouwens

Beste mensen. Dank voor de reacties. We moeten blijven vragen ook -of misschien wel juist- aan de mensen waar we tegen op kijken. Niet vanwege wantrouwen, maar wel om elkaar wakker te houden.

Anil Kshatriya

“For every complex problem there is an answer that is clear, simple and wrong.”
- H. L. Mencken

Very nicely articulated, Jan. I enjoyed reading this piece (though in translation).

R.J.A.M. Vromans

Wat een goed stuk om over na te denken, dank hiervoor Jan.

Nart Wielaard

Wantrouw mensen die (in overdrachtelijke zin) met uitroeptekens praten. En let heel goed op bij mensen die heel veel vraagtekens gebruiken, want die zijn veel interessanter. Is al jaren mijn motto. Want twijfel is de enige weg naar meer wijsheid.

Jan Visser

Fantastisch artikel!. Helder geschreven en uitgelegd. Thinking slow. Frielink zei het ook al. "maak geen grote sprongen als dribbelpasjes geboden zijn"

Arnout van Kempen

De “four horsemen”, met Daniel Dennett voorop, hebben het vaker gehad over de onttovering van de wereld als je je door wetenschap laat leiden. Zij zijn daar overigens positief over, maar dat terzijde.

Dit bericht is voor mij wel wat onttovering. Want ja, ik was een van die mensen die Dan Ariely echt geweldig vond. Zijn TED-talks kan ik keer op keer zien, en ieder keer genieten.

Maar goed, die gaan ook weer bij het grof vuil dus.

Hoe toepasselijk dat ik vanmorgen in de auto naar No More Heroes zat te luisteren.

De waarheid telt. Maar toch. Bah.

Jan Bouwens

Dank je Luc. Ik weet het maar nu is klip-en-klaar fraude vastgesteld. De studie die je noemt werd door het NWO gesubsidieerd. Er zijn vele duizenden proefpersonen gebruikt en er was geen splinter van bewijs. De onderzoekers zijn uitermate voorzichtig in hun conclusies en zeggen dat het wellicht te maken heeft met het feit dat de proefpersonen van Ariely op een TOPschool zaten en dat er tussen de dataverzamelingsmomenten 10 jaren waren verstreken. Ook deze "verdediging" schrijf ik toe aan een tekort aan scepsis, je moet blijven vragen en het is verbazend dat Ariely nog zo lang weg kwam met zijn results. Iedereen lipe weg met zijn mooie verhaaltjes, inclusief NBA: https://www.nba.nl/nieuws-en-agenda/nieuwsarchief/2018/september/magazine-moresprudentie/. Ik herhaal: BLIJF VRAGEN STELLEN aan mensen die zich opwerpen als goeroes en stel vragen aan academici die meer dan twee toppublicaties per jaar producereb in de psychologie. Dat kan alleen superman!

Luc Quadackers

Jan, Ariely lag ook al eerder onder vuur (in 2018): zie o.a.: https://www.nwo.nl/en/news/replication-project-questions-outcome-famous-ten-commandments-study

Ik kan me vergissen, maar volgens mij was (de funding van) die replicatiestudie zelfs een resultaat van de Stapel-affaire.

Reageren op een artikel kan tot drie maanden na plaatsing. Reageren op dit artikel is daarom niet meer mogelijk.

Aanmelden nieuwsbrief

Ontvang elke werkdag (maandag t/m vrijdag) de laatste nieuwsberichten, opinies en artikelen in uw mailbox.

Bent u NBA-lid? Dan kunt u zich ook aanmelden via uw ledenprofiel op MijnNBA.nl.