Effectevaluatie van beleid en programma’s

We helpen teams die beleid of programma’s uitvoeren om vóór invoering een evaluatie op te zetten en om interventies met bestaande gegevens te beoordelen. We beginnen bij de uitkomst, de interventie zelf en de vraag hoe we een geloofwaardige vergelijking kunnen maken.

Vóór en na invoering

Vóór invoering

We bepalen wie het programma bereikt, welke uitkomsten het moet veranderen en hoe we die meten. Als de uitvoering het toelaat, kan gefaseerde invoering of loting over het moment van deelname helpen. Vóór de start spreken we af welke vergelijking uitvoerbaar is en hoe we de gegevens verzamelen.

Na invoering

We bekijken de timing, de toelatingscriteria en de vastgelegde uitkomsten, en gaan na hoe mensen of locaties aan het programma gingen deelnemen. Als de gegevens het toelaten, maken we een quasi-experimentele vergelijking. Bij gefaseerde invoering kan bijvoorbeeld de verschil-in-verschillenmethode passen, mits er een geloofwaardige vergelijkingsgroep en geschikte gegevens van vóór de interventie zijn.

Wat je ontvangt

Afhankelijk van wat we afspreken, kan de evaluatie een onderzoeksopzet met gegevensvereisten, een analyseplan, vastgelegde controles, schattingen met hun onzekerheid en een rapport omvatten. Het rapport legt uit welke conclusies de bevindingen toelaten. Bij het afbakenen van het werk bespreken we hoe je de resultaten kunt reproduceren en hoe we ze overdragen.

Bekijk een uitgewerkt voorbeeld van gefaseerde invoering met synthetische gegevens, een grafiek van de trends vóór de interventie en een berekening per cohort. Causal Capybara laat zien hoe je de onderzoeksopzet, diagnostische controles en analysescripts kunt inzien.

Wat als er geen geloofwaardige vergelijkingsgroep is?

We kunnen beschrijven wat er is veranderd, de uitvoering beoordelen en aangeven welk bewijs nog ontbreekt. Een trend voor en na de invoering laat op zichzelf zelden zien wat het programma heeft veroorzaakt. Als de gegevens onvoldoende zijn voor een causale schatting, vermelden we dat in het rapport. We leggen ook uit welke extra gegevens of welke volgende invoering meer duidelijkheid kan geven.

Vertel om welke interventie en welke datums het gaat, welke uitkomsten belangrijk zijn en welke gegevens beschikbaar zijn. In je eerste bericht is een beschrijving van de gegevens voldoende.

Bespreek een evaluatie