Impact evaluations, bias, and bias reduction

Impactevaluatie met behulp van niet-experimenteel onderzoek

Ondanks het feit dat veel wetenschappers geloven dat experimentele ontwerpen de enige manier zijn om op een geloofwaardige manier een oorzakelijk verband te leggen, kunnen ook niet-experimentele ontwerpen op geloofwaardige wijze een oorzakelijk verband vaststellen. Steffen Eriksen onderzocht impactevaluatie met behulp van niet-experimentele ontwerpen. Hij stelt bias en biasreductie opnieuw centraal in het debat over causale gevolgtrekking, waarbij de nadruk wordt gelegd op de noodzaak van voortdurende interesse en verbetering van niet-experimentele ontwerpen als een fundamenteel alternatief voor experimentele ontwerpen.

De nadruk van zijn proefschrift ligt op de vraag hoe biases geminimaliseerd kunnen worden. Het onderzoek van Eriksen begint op macroniveau, wanneer hij de impact bestudeert van hervormingen in de gezondheidszorgfinanciering. Hij bestudeert de ‘self-selection bias’ die aanwezig is wanneer nationale regeringen besluiten een hervorming van de gezondheidszorgfinanciering uit te voeren.

Vervolgens zoomt hij in op het niveau van huishoudens, wanneer hij de impact van een microfinancieringsprogramma in Bolivia evalueert en de uitbreidingsplannen van het microfinancieringsinstituut toepast om causale gevolgtrekking mogelijk te maken. De analyse op het niveau van huishoudens wordt daarna voortgezet met een evaluatie van de impact van een microfinancieringsprogramma in Ghana, een scenario waarin het te evalueren project al is gestart en de evaluatie dus moet worden uitgevoerd zonder dat er een baseline is. In een poging om de resultaten van de impactevaluatie uit te leggen, wordt het effect van sociaal gewenst gedrag op het gerapporteerde gebruik van leningen geanalyseerd. Tot sloot bekijkt Eriksen het individuele niveau en onderzoekt hij hoe bias als gevolg van sociaal wenselijk en opportunistisch gedrag van invloed is op de geopenbaarde steun voor boerenmarktorganisaties op het platteland van Ethiopië.

Proefschrift: http://hdl.handle.net/11370/0c38aa0b-ee73-4829-96cd-562136c64a1e