Virkningsevaluering
Thomas Bredgaard, Lektor, P.hd.
[email protected]
Åbning af Forskningscenter for Evaluering, 17 maj 2011
Realistisk evaluering
C+M=O
Context + Mechanism = Outcome
Under hvilke
omstændigheder?
Hvorfor?
Hvad virker?
Den realistiske evaluering
Teori
Mekanismer (M)
Kontekst (K)
Outcome (O)
Programspecifikationer
Hvad virker for
hvem, under
hvilke
omstændigheder
Hypoteser
Hvad forventes at
virke for hvem,
under hvilke
omstændigheder?
Observationer
Multiple metoder og
analyse af M, K, O
Kilde: R. Pawson & N. Tilley (1997): ”Realistic Evaluation”, Sage.
Moderator:
Køber selv
Nikotinplastre
Rygestop
Generativ
mekanisme:
Motivation
Moderatorer:
Tørt, ilt,
kompakt m.v.
Krudt
Eksplosion
Generativ
mekanisme: Ild
Realistisk evaluering som ”gylden middelvej”
Eksperimentel tilgang
Realistisk tilgang
Undersøgelsesspørgsmål
Hvad virker?
Hvad virker for hvem, hvordan, Hvordan opfattes virkningerne
hvorfor?
og hvordan kan de forenes
gennem forhandling?
Fokus
Effekt
Proces og effekt
Proces
Metode
Kvantitativ:
•Sammenlignelige kontrol- og
deltagergrupper.
•Måling før og efter
behandling
Kvantitative og kvalitative
metoder
Kvalitativ
•Casestudier af
”stakeholdernes”
konstruktioner
Teori om indsats
og effekt
Kausalteori
Programteori
Ingen
Viden
Kontekstuafhængig
Global viden
Kontekst, mekanisme,
outcome
Kontekstafhængig
Lokal viden
Beslutningsproces
Rationelle valg
Informere praktikere,
deltagere og beslutningstagere
og udvikle deres
programteorier
Deliberation, Forhandling
Kilde: R. Pawson & N. Tilley (1997) : Realistic Evaluation, Sage.
Socialkonstruktivistisk
tilgang
Teori- eller implementeringsfejl?
Resultatet er indtruffet
Resultatet er udeblevet
Indsatsen er korrekt
implementeret
1. Programteorien er
bestyrket
2. Teorifejl
Indsatsen er ikke korrekt
implementeret
3. Andre forhold end
indsatsen forklarer
resultatet
4. Implementeringsfejl og
muligvis teorifejl
P. Dahler-Larsen & H.K. Krogstrup (2004): Nye veje i evaluering, Systime Academic, s. 75.
Hvornår er virkningsevaluering
anvendelig?
1. Vi ved hvad der virker, men ikke hvorfor og hvordan
2. Vi ved det ikke virker, men ikke hvorfor og hvordan
3. Vi tror vi ved, hvad der virker, men har ikke
undersøgt/dokumenteret det
Moderatorer
Målgruppe
Aktiviteter
Delmål
Virksomme mekanismer
.
Slutmål