HVORFOR rethink IMPACTS OG HVAD ER rethink IMPACTS

HVORFOR rethink. IMPACTS? OG HVAD ER rethink. IMPACTS? AU AARHUS UNIVERSITY rethink. IMPACTS 2017

rethink. IMPACTS 2017 I 2013: Etablering af et formelt, strategisk partnerskab mellem Fonden Aarhus 2017 og Aarhus Universitet – løbende til og med 2018 Fælles organisation: Team bemandet af både forskere og embedsmænd. Styregruppe med repræsentanter fra fonden, universitetet, Aarhus Kommune og Region Midtjylland Hovedopgave og økonomi: Gennemføre en forskningsbaseret evaluering af Aarhus 2017 Samfinansieret 5 mio. Kr. fra fonden og 5 mio. kr. fra AU AU AARHUS UNIVERSITY rethink. IMPACTS 2017 18 JUNI 2021

RETHINK EVALUATION – VÆGT PÅ LÆRINGSASPEKTET Mål med evalueringen: At gennemføre en evaluering, der ikke alene er retrospektiv/summativ, ikke alene new public management: “fik vi, hvad vi betalte for”? Men (også) en evaluering, der er anvendelig undervejs og som fokuserer på læringspotentialet for kultursektoren, der kvalificerer processen og resultatet. AU AARHUS UNIVERSITY rethink. IMPACTS 2017 18 JUNI 2021

PARTNERSKABETS INTERESSER By - Region AU • • Aarhus 2017 Forskning og forskningsnetværk Videndeling Udvikling af nye metoder Data • • • Obligatoriske EU-krav Dokumentation Læring = forbedret leverance • • Return on investment Viden Nye Indikators Viden om tværgående samarbejder Fælles interesser • • • AU Dokumentation af outputs, outcomes og impacts af Aarhus 2017 Udvikling af en gentækt evalueringsmodel Udvikle samarbejdet mellem universitetet og byen og regionen AARHUS UNIVERSITY rethink. IMPACTS 2017 18 JUNI 2021

HVAD ER EN EVALUERING? En definition: (Olsen & Rieper 2004) AU ”Evaluering er systematisk indsamling af informationer og data, der giver grundlag for at skabe viden om gennemførelse, organisering og virkninger af konkrete indsatser, der er sat i værk for at påvirke forhold i samfundet. Evalueringer gennemføres med henblik på praktisk anvendelse, hvilket kan ske gennem formidling af resultater undervejs eller efter at evalueringen er gennemført. ” Information og data skal indsamles systematisk og metodisk korrekt Skal bidrage til et øget vidensniveau. Evaluering igangsættes med hensigt om at påvirke praksis. Kommunikation om og anvendelse af resultater af evalueringen kan ske undervejs (formativt) eller efter (summativt) projektet. AARHUS UNIVERSITY rethink. IMPACTS 2017 18 JUNI 2021

PRIORITERING AF 7 EVALUERINGSFORMÅL Kontrol Læring Oplysning Symbolsk Taktisk Strategisk Konstitutive effekter AU AARHUS UNIVERSITY rethink. IMPACTS 2017 18 JUNI 2021

EVALUERINGSROLLER ‘Normal’ evaluering Opdragsgiver: Aarhus Kommune og Region Midtjylland Aarhus 2017 Evaluator: Aarhus Universitet AARHUS rethink. IMPACTS 2017 AU UNIVERSITY Aarhus 2017, Aarhus Kommune, Region Midtjylland (og Aarhus University) Aarhus 2017, Aarhus Kommune, Region Midtjylland og Aarhus Universitet Evaluand: Opdragsgiver: Aarhus University og Aarhus 2017 rethink. IMPACTS 2017 18 JUNI 2021

10 DILEMMAER: PRIORITERINGER OG INTERESSER Bestillingsopgave <-> Uafhængighed Bredt dækkende <-> Udvalgte dybdestudier Summativ <-> Formativ Eksisterende metoder og indikatorer <-> Udvikling af nye metoder og indikatorer Fastlagt evalueringsdesign (inkl. baseline) <-> Dynamisk evaleringsdesign (løbende justering) Resultatorienteret <-> Processorienteret Kortsigtet <-> Langsigtet Observation <-> Intervention Forskerbaseret <-> Analyse af resultater (outcomes) AARHUS afhæng AU UNIVERSITY <-> Forskningsbaseret Analyse af effekter (impacts) rethink. IMPACTS 2017 18 JUNI 2021

TILGANGE TIL EVALUERINGSDESIGNET Samarbejdsmodellen for evalueringen medfører en dobbelt tilgang til af evalueringsdesignet Aarhus 2017 fokuserer på succeskriterier rethink. IMPACTS 2017 fokuserer på impact områer udviklet i tilknytning til ECo. Cs generelt Jvf. Anbefalinger fra ECo. C Policy Group (2010)/Garcia (2013) Vores – lettere reviderede – fem impact områder (og et sjette, tværgående): Kulturelle Sociale Økonomiske Image og identitetsmæssige Politiske og organisatoriske Europæiske Udfordring: At bygge bro mellem de to tilgange til evalueringsdesignet forbinde successkriterierne til impact områder AU AARHUS UNIVERSITY rethink. IMPACTS 2017 18 JUNI 2021

UDVIKLING AF EVALUERINGSKRITERIERNE Strategiske mål Successkriterier v. 1 Successkriterier v. 2 Politiske & org. impacts ECo. C-forskning AARHUS UNIVERSITY Sociale impacts Successkriterier v. 3 impacts Evalueringskriterier Økonomiske Image & identitetsimpacts Evalueringsworkshops AU Kulturelle impacts Europæiske dimension formativ evaluering rethink. IMPACTS 2017 18 JUNI 2021

UDVÆLGELSE AF EVALUERINGSKRITERIER Outputs Potentielle kriterier inden for et impactområde Udvalgte evalueringskriterier Monitorering For hver impactområde formulerer vi en række evalueringskriterier Sekundære data Outcomes Impacts Forskningsbidrag Disse kan struktureres på forskellige måder, f. eks… rethink. IMPACTS (inkl. partnere) Existerende metoder/indikatorer AU AARHUS UNIVERSITY Nye metoder/indikatorer rethink. IMPACTS 2017 18 JUNI 2021