Geen pretenties

Bron: @BerkeleyTrue (Medium), http://tinyurl.com/zlexsvv

Als het meezat, was de beoogde respondent thuis en genegen het onderzoek ter plekke te ondergaan. Zo niet, dan werd volgens een vaste instructie (‘sla linksaf en bij de eerste afslag opnieuw, en bel aan bij het derde huis rechts’) een ander huishouden benaderd. Aan het eind van de dag gingen de ingevulde enquêtes in een envelop naar het onderzoeksbureau, waar ze door datatypisten in de computer werden ingevoerd – aanvankelijk met ponskaarten, later rechtstreeks in een bestand.

Alle fasen in het proces werden nauwkeurig gemonitord om bijvoorbeeld fraude tegen te gaan – het was voor enquêteurs, ook maar mensen nietwaar, best verleidelijk om thuis in bed tien enquêtes in te vullen. Ook als de data eenmaal waren ingeklopt, vond er nog een strenge check plaats. Door mij bijvoorbeeld. We spreken over het jaar 1990 en mijn derde bijbaantje. Ik mocht zestig uur besteden aan het opschonen van de data uit een onderzoek met zo’n duizend respondenten. Vond ik al analyserend inconsistenties, zoals in 1800 geboren kleuters, dan dook ik in de ingevulde enquêteboekjes om het lek boven te krijgen.

Er is een race to the bottom van marktonderzoeksbureautjes die voor een prikkie een webenquête leveren.

Schreeuwend duur, dit. Internet en web hebben het een stuk goedkoper en sneller gemaakt, zoveel is zeker. Maar niet noodzakelijk beter. Er is een race to the bottom van marktonderzoeksbureautjes die voor een prikkie een webenquête leveren. En van managers en marketeers die met een persbericht over ‘een onderzoekje’ wat gratis publiciteit willen genereren.

Zou het tot marketing beperkt blijven, dan was het allemaal niet zo erg. Als de leugen ergens regeert, dan is het daar. Maar beleids- en opinieonderzoek, ter ondersteuning van de publieke zaak, raakt inmiddels ook geïnfecteerd. Steeds vaker hoor ik bij de minste kritiek op de opzet zeggen: ‘Ja, maar ons onderzoek had ook geen wetenschappelijke pretenties!’ Dat is als met een vals biljetje van 50 bij de Jumbo proberen te betalen en dan zeggen: ‘ja, maar ik heb ook nooit de pretentie gehad dat het echt was.’

De denkfout is dat het verschil tussen markt- en wetenschappelijk onderzoek gelegen zou zijn in de kwaliteit van de dataverzameling. Als er al verschil is tussen marktonderzoek en wetenschap, is die gelegen in de diepgang van de analyse. Data verzamelen is al zoveel goedkoper en sneller geworden dat we niet minder, maar meer zouden moeten investeren in de kwaliteit ervan. Net zoals bij onze dijken: in het publieke belang.


Deze column is verschenen in IP | Vakblad voor informatieprofessionals, jaargang 21 nummer 2, 9 maart 2017.

Geen pretenties by Frank Huysmans is licensed under a Creative Commons Attribution 4.0 International License.

Posted by Frank Huysmans on 10 maart 2017 | Posted in columns, onderzoek, opinie, vakpublicaties | Tagged big data, data, data cleaning, data-analyse, dataverzameling | Reactie