WORKSHOP 1 FEEDBACK P SKRIFTLIGE OPGAVER Jesper Rosenberg

WORKSHOP 1 FEEDBACK PÅ SKRIFTLIGE OPGAVER Jesper Rosenberg Hansen (ECON) Henrik B. Seeberg (PS) Martin Nielsen (BCOM) Moderator: Bente Mosgaard (CUL) FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021

DE 7 PRINCIPPER FOR GOD FEEDBACK God feedback 1. forklarer læringsmål og kriterier 2. træner de studerende i selvevaluering 3. giver information af høj kvalitet 4. tilskynder til dialog 5. styrker motivation og selvtillid 6. giver mulighed for at rette 7. giver læreren information om undervisningen FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 2

SKRIFTLIG PEER-TO-PEER FEEDBACK JESPER ROSENBERG HANSEN

SKRIFTLIG PEER-TO-PEER FEEDBACK Anvendt peer-to-peer feedback: studerende giver hinanden skriftlig feedback på hinandens skriftlige casebesvarelser Formål: Udvikle Business Strategy fag (bachelorfag med 170 studerende på 4. semester) Grundlæggende udfordring at aktivere og give feedback til de mange studerende Øge skriftligheden i faget, som generelt har været efterspurgt på økonomistudiet FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 4

FEEDBACK ØVELSEN Studerende (i grupper af op til 4) laver en skriftlig casebevarelse, mens andre grupper studerende giver feedback på førnævntes skriftlige casebesvarelser Formål er at få de studerende til arbejde med cases, da de studerende har manglet at arbejde med teorierne, hvor casearbejde passer perfekt Succeskriterier er, at de studerende leverer nogle gennemarbejdede besvarelser og relevant feedback og dermed kommer til at bearbejde pensum på en mere dybdegående måde plus studerende bliver bedre til at give feedback (f. eks. når de senere skal opponere på bachelor-opgaver) FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 5

DEN KONKRETE AKTIVITET To runder med cases: Ene runde skal de studerende lave skriftlig casebesvarelse (5 -6 sider) og anden runde give feedback (1 -2 sider) på 2 andre gruppers casebevarelser (dvs. alle får feedback fra 2 andre grupper) – og så bytter de Læringsmålene (for faget) ændret så anvendelse af teori på cases kommer mere frem Aktiviteten stod også som del af undervisningsform (dog ikke gjort obligatorisk) Cases: klassiske cases (fra Harvard Business School – med enorm god underviserguide ) – som havde klar link til teori – og jeg selv havde undervist ud fra Stillende så nogle spørgsmål til cases – tæt på teori – som de skulle besvare i deres casesvarelse FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 6

DEN KONKRETE AKTIVTITET - FORTSAT Forklarede på timer, hvordan de studerende skal lave casebesvarelse (nogle gange med video fra nettet) og hvordan de give feedback (lavede simple podcast om at give feedback) Oprettede gruppetilmeldinger i Blackboard – og gjorde så grupper kunne sende til hinandens grupper (dog uden kunne se hvem den anden gruppe bestod af – dvs. anonymt) Endelig brugte tid på timerne peer-to-peer feedback var gennemført til at trække de vigtigste ting frem – både fra casene – men også udfordringer i deres besvarelser (da jeg også læste udsnit af besvarelser) FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 7

UDFORDRINGER Få det til at passe rent tidsmæssigt: 1) undervisning i teori, 2) afleveringer af casebesvarelse, 3) feedback, og 4) centrale pointer på timen. Processen bliver lang Få folk i grupper – og få dem til at sende til rigtige grupper (svært få gjort anonymt i Blackboard) Hjælpe dem med at rykke dem, som ikke besvarede på aftalte deadline Studerende utilfreds med ikke får direkte feedback fra forelæser eller instruktor (blev afspejlet i lidt dårligere evalueringer end vanligt) Fremover endnu bedre hvis øvelser endnu tættere af eksamen – så kan øge motivationen til arbejde med dem FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 8

RESULTATER: Positive resultater: Mange gode besvarelser og mange gode feedback-besvarelser Oplevede lidt færre helt dårlige besvarelser til eksamen (tror fik løftet bunden – som måske ikke af sig selv ville arbejde med det) Opdager hvis generelle ting holdet ikke har fanget ift. teorierne Negative resulter: Rimelig tidskrævende for underviser alt i alt (og ikke normgivende på Økonomi) Lidt svært at sælge til studerende – som ikke kan forstå hvorfor ikke forelæser eller instruktor giver feedback Tager også tid på timerne (som går fra anden undervisning) FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 9

PAPERFEEDBACK I ”OFFENTLIG POLITIK” Oplæg ved Henrik Bech Seeberg (adjunkt), Underviser på Offentlig Politik, Institut for Statskundskab, Århus Universitet FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021

OFFENTLIG POLITIK 250 studerende på 5. semester på statskundskab. Forelæsninger og inddelt i 9 hold. Baggrund: gammelt fag, tidligere med tavleundervisning om en case + midtvejsopgave. Eksamensform uændret. FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 12

MODELLEN De studerende skriver i læsegrupper 4 essays af 5. 000 ord. Essays: analyse en case, fx forklare velfærdsreformen 2006 ud fra valgfri teori. Oxford-modellen: De mødes med 2 andre læsegrupper samt instruktoren og giver/får feedback. 20 min per essay. Rotation. FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 13

MOTIVATION Essay er vigtigt! Træning ift. eksamen: hjemmeopgave med selvvalgt problemstilling. Peer-learning: Man læser to essays. Hvordan bygger man et godt argument op? Hvordan kunne man også have grebet opgaven an? Feedback tilskynder til at gøre en ekstra indsats. Oxford-modellen: højere intensitet i mindre grupper. Løfte bunden. Læringsmål: At give og modtage feedback er en evne i sig selv. 5. semester: overgang fra bachelor til kandidat. FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 14

UDFORDRING Processtyring og kvalitetssikring: når vi læringsmålene ensartet for alle (at blive god til at analyses offentlig politik)? Meget er overladt til de studerende. Mødes kun 45 -60 min med instruktor. Kommunikation til de studerende – forstår de konceptet? Bryder med 2 års holdundervisning. FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 15

LØSNING Blackboard intro til de studerende – noter om at skrive essays samt om at give god feedback (struktur og substans). Oplæg på forelæsning og oplæg på første intro-holdtime Supervision af instruktorer. Underviser mødes med instruktor og diskutere tre essays hver gang. Fokusområde til hvert essay: teori, analyse etc. FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 16

EVALUERING? De studerende er frustreret, fordi det er svært. Forventer progression over fire essays. Evaluering først meningsfuldt 25. januar, når opgaverne er afleveret. Hovedbekymring: 20 studerende fra 3. semester på OPØ. FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 17

UDFORDRINGER VED KOPIERING Planlægning: hvad er sekvensen? Forberedelse: egnede cases med fyldigt casemateriale. Grundig orientering og begrundelse for modellen. Hyre dygtige instruktorer. Velfungerende læsegrupper. Brug blackboard til at udveksle essays. FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 18

SPECIALEKOLLOKVIUM – FEED BACK PROCESSER I ET FORUM AF PEERS JESPER ROSENBERG HANSEN

Hvad motiverede mig? Hvad var udfordringen? MOTIVATION OG UDFORDRING • Oprindeligt: ”specialesump” • Stordrift: • Formalia • Evalueringskriterier • Specialeprocessen • Metavejledning • Ensartethed • Etablere specialeskrivning som ”fag” FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 21

Hvad gjorde jeg? KONKRET FREMGANGSMÅDE • Afventer specialetilmeldinger via sekretariatet • Tager gerne en 5 -6 specialer ad gangen (= 6 -8 studerende) • Indkalder til første fælles kollokvium så tidligt som muligt i forløbet • Sender vejledningsbrev og lille skriv om specialeprocessen med • Forklarer konceptet omkring kollokvium og individuel vejledning FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 22

STRUKTUR 1. Small talk og sladder (Jeg er ok, du er ok) 2. (Én er på (Én siger mest)) 3. Rundbordssamtale (Runden) 4. Opfølgning og næste gang (Udtoning og social kontrakt) (jf. Kastberg & Nielsen 2003) FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 23

1. SMALL TALK OG SLADDER Har du hørt … Sebastian har fået 10 … Malene har fået job hos … Line afleverer næste uge … Her er de kopier jeg lovede dig … Anja skal giftes på lørdag … Skal du med til Skanderborg i år … Har du set der klip på Youtube … FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 24

(2. ÉN ER PÅ) § Forberedt, men uformelt oplæg § Positionsbestemmelse: hvor er jeg henne i processen § Lige så gerne emner, faser og problemer til diskussion og bøn om hjælp og løsningsforslag som fremlæggelse af færdigt arbejde FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 25

3. RUNDBORDSSAMTALE § § § Forberedt, men uformelt oplæg Positionsbestemmelse: hvor er jeg henne i processen Lige så gerne emner, faser og problemer til diskussion og bøn om hjælp og løsningsforslag som fremlæggelse af færdigt arbejde § § § Konkret opfølgning på målsætninger fra sidste gang Også ofte konkrete spørgsmål Som regel procesrelateret FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 26

4. OPFØLGNING OG NÆSTE GANG Opfølgning jf. 3. Aftaler til næste gang Dato og tid Målsætninger Oplægsholder Bager FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 27

Hvordan gik det? RESULTATER OG ERKENDELSER • Velfungerende og populært forum for feed back på den løbende specialeproces • Træning af feed back og af udvikling af kvalitetskriterier: hvornår er noget godt (nok) • Forbedring af feed back muligheder: dialog, symmetrisk feed back, diskussion • Alle slags specialer kan være del af et (det samme) specialekollokvium • Siden 1998 • 122 specialer (138 studerende) • 22 specialekollokvier • Gennemsnitligt ca. 5 kollokviemøder pr. specialeforløb • Ved 5 -6 specialer (6 -8 studerende) ca. 4 timer pr. speciale til kollokviet • Siden 2013: Individuel vejledning: mellem 5 og 14 timer pr. speciale (gennemsnit: 10 timer) FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 28

Hvad lykkedes godt? Hvad skal ændres? SUCCES • OG FORBEDRINGSPOTENTIALE Fagligt og socialt forum for at mødes med peers • Tidsbesparelse/stordriftsfordel • Ensartethed • Sikkerhed for at alle får alt/ det samme at vide • • • Bedre tidsstyring til de enkelte kollokviemøder Mere konsekvent opfølgning på målsætninger Mere peer feed back, mindre vejledertaletid (!) FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 29

Hvad skal andre være opmærksom på, hvis de vil kopiere det, jeg har gjort? GODE RÅD • Se det som en investering i tidsbesparelse • Se det som en udvidelse og forbedring af feed back • Alle slags specialer kan være del af et kollokvium • Man må meget gerne turde at lade et kollokviemøde blive styret af de studerende • Det bedste kollokviemøde er det, hvor vejleder kan læne sig tilbage og blive en flue på væggen FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 30

DE 7 PRINCIPPER FOR GOD FEEDBACK God feedback 1. forklarer læringsmål og kriterier 2. træner de studerende i selvevaluering 3. giver information af høj kvalitet 4. tilskynder til dialog 5. styrker motivation og selvtillid 6. giver mulighed for at rette 7. giver læreren information om undervisningen FORNAVN EFTERNAVN TITEL 21. FEBRUAR 2021 31