Evidenshierarki eller typologi Selektionen af primrstudier bliver vigtig

Evidenshierarki eller - typologi Selektionen af primærstudier bliver vigtig for at vurdere kvaliteten af forskningsoversigten. § Der udspinder sig inden for evidensbevægelsen en til tider heftig debat om metoder. § Fortalere for det smalle evidensbegreb lægger vægt på evidenshierarkiet med RCT som den gyldne standard, mens fortalere for det brede evidensbegreb slår til lyd for evidens-typologi. §

Evidens-hierarki eksempel I a. b. c. d. e. f. g. h. i. Randomized controlled trials Quasi-experimental studies Before-and-after comparison Cross-sectional, random sample studies Process evaluation, formative studies and action research Qualitative case studies and ethnographic research Descriptive guides and examples of good practice Professional and expert opinion User opinion

Evidenshierarki eksempel II Niveau Studietype 1 a 1 b 1 c 2 a 2 b 3 a 3 b 4 Systematiske reviews af RCTs. Enkeltstående RCTs af god kvalitet. Kontrollerede, men ikke randomiserede forsøg. Systematiske reviews af kohortestudier. Enkeltstående kohortestudier. Dårlige RCTs. Systematiske reviews over case-kontrolstudier. Enkeltstående case-kontrol studier. Case-serier eller kohortestudier eller case-kontrol af dårlig kvalitet. Ekspertvurderinger, konsensuskonferencer, kvalitative designs mv. 5

Hvor skal snittet lægges? Stringent anvendelse af evidenshierarkiet med RCT i toppen – variationer tillades: gælder Cochrane og Campbell § Pragmatisk tilgang hos SCIE på det sociale område og EPPI på uddannelsesområdet § Stærk metodedebat på social- og uddannelsesområdet §

Argumenter imod evidenshierarkiet Konteksten er forskellig, konteksternes betydning skjules i gennemsnitstallene. Indsatser er sammensat og dynamiske, men RCT forudsætter en ensartet og stabil indsats, der gives til hele populationen. Årsag-virkning er kompleks og dynamisk.

Mulig konsekvens af kritikken: typologi i stedet for hierarki

Evidenstypologi - eksempel Design: Research question: Qualitative research Survey Case control studies Effectiveness Does this work? Does doing this work better than doing that? Cohort studies + Process of service delivery How does it work? ++ + Salience Does it matter? ++ ++ Safety Will it do more good than harm? + Acceptability Will children/parents be willing to or want to take up the service offered? ++ RCTs Quasi experimen tal studies ++ + + Cost effectiveness Is it worth buying this service? ++ + + ++ ++ ++ Satisfaction with the service Are users, providers and other stakeholders satisfied with the service? ++ ++ + Appropriateness Is this the right service for these children? Non experimen tal evalua tions + +

Evidenstypologi - eksempel RCT Forløbs undersøgelser Casestudier Bruger evalueringer Evalueringens formål Stop/go Tilpasning Forståelse tilpasning Indsatsens karakter Enkel ”teknisk” Veldefineret Kompleks Fra enkel til kompleks Kontekstens karakter Lavt differentieret Moderat differentieret Højt differentieret Fra højt til lave differentieret Lav viden Forhåndsviden om Hypoteser om årsag-virkning specifikke virkninger Kan modelleres statistisk

Reflektioner Fremover intens debat om det smalle versus det brede evidensbegreb? § Vil enkeltstående evalueringer blive tillagt mindre vægt? § Større metodekrav til effektevalueringer? §