Beschrijving motivatie flexibele examenorganisatie in het afstandsonderwijs van
Beschrijving motivatie flexibele examenorganisatie in het afstandsonderwijs van VIVES dr. JC Callens
Aanpak presentatie – Doorheen presentatie worden uitgangspunten/accenten besproken • gemaakte keuze op basis van – Resultaat onderzoek – Analyse behoeftes/noden van studenten – Realiteit in hogeschool » Bijv. kost, weerstand, cultuurverschillen, …. • Geen kookboek-pedagogiek – Wel beschrijving van gemaakte keuzes – Synthese op eind van presentatie – Korte vragenronde
Brainstorm, afzonderlijk, 20 seconden
Brainstorm, per twee, 20 seconden
Prentjes…
1. Vives op afstand • Start 1997 • lerarenopleiding–Tielt • Uitdaging: `Hoe werk, zorg voor gezin en studie mogelijk maken? ` • Keuze voor afstandsonderwijs • 7 studenten • Vandaag > 2000 studenten in 5 studiegebieden • Toont maatschappelijke relevantie van onderwijs op afstand
Overzicht AO opleidingen in VIVES
2. Probleemstelling • Hogere drop-out in AO tov f 2 f • Enerzijds hoge kost • Voor instelling: output financiering • Voor student: geen diploma • Voor maatschappij: gemis gekwalificeerde mensen • Anderzijds is er maatschappelijke relevantie van AO • > 2000 studenten Efficiënte manier (maar weinig ethische) om studieretentie te verhogen Hoe drop-out verkleinen en dus retentie verhogen?
uitdaging Hoe studenten afstandsonderwijs motiveren?
Herformuleren uitdaging Hoe studenten afstandsonderwijs niet demotiveren!
I’m not a fish Student perspective, cf. perception (Könings, K. , Brand-Gruwel, S. , & van Merriënboer , 2005) source: http: //www. geekologie. com/2008/09/under_the_sea_fish_n_flush_toi. php
I’m not a fish profiel van de lerende Student perspective, cf. perception (Könings, K. , Brand-Gruwel, S. , & van Merriënboer , 2005) source: http: //www. geekologie. com/2008/09/under_the_sea_fish_n_flush_toi. php
3. Profiel student in VIVES op afstand Meeste studenten (45%) in afstandsonderwijs zijn van West-Vlaanderen https: //trefpunt. vives. be/
Leeftijd/geslacht 62% van de studenten afstandsonderwijs zijn tussen 25 en 40 jaar oud
Profiel: werksituatie( Cfr. Bevraging studenten AO) • Werksituatie AO studenten Valid Missing Total 1. fulltime Frequency 290 Percent 32, 3 2. 50 -90% 299 33, 3 3. minder dan 50% 100 11, 1 4. werkzoekende 128 14, 2 Total 817 90, 9 82 9, 1 899 100, 0 System
Profiel: leefsitutatie ( Cfr. Bevraging studenten AO) Valid 1. alleenstaand zonder kinderen 2. met partner zonder kinderen 3. alleenstaand met kinderen Missing Total 4. met partner en kinderen 5. andere Total System Frequency Percent 153 17, 0 202 22, 5 40 4, 4 373 48 816 83 899 41, 5 5, 3 90, 8 9, 2 100, 0
Profiel: leefsitutatie/werksituatie( Cfr. Bevraging studenten AO) Werksituatie van student * Leefsituatie participant Crosstabulation leefsituatie participant met alleenstaand partner zonder met en kinderen andere Total werksituatie van fulltime Count 54 94 20 118 4 290 student % of Total 6, 6% 11, 5% 2, 5% 14, 5% 0, 5% 35, 5% 50 -90% Count 53 66 13 155 11 298 % of Total 6, 5% 8, 1% 1, 6% 19, 0% 1, 3% 36, 5% minder dan Count 21 19 2 45 13 100 50% % of Total 2, 6% 2, 3% 0, 2% 5, 5% 1, 6% 12, 3% werkzoekende Count 25 23 5 55 20 128 % of Total 3, 1% 2, 8% 0, 6% 6, 7% 2, 5% 15, 7% Total Count 153 202 40 373 48 816 % of Total 18, 8% 24, 8% 4, 9% 45, 7% 5, 9% 100, 0% • Werkt meer dan 50% + partner/kinderen 33, 5% van participanten (n=273 van 816)
Gevolg profiel AO student weisure Profiel van de lerende in AO VIVES – Aantal AO studenten: > 2000 – 62% van de studenten AO is tussen 25 en 40 jaar • Vaak combinatie van zaken – Combinatie van work / leisure / weisure » zorg voor gezin, werk, studie… • 33, 5% werkt meer dan 50% + partner/kinderen • n=273 van 816 participanten • Weisure learner control
4. Learner control - cf. Weisure andere redenen… F 2 f-onderwijs: de beste student zit hier…. Bron: https: //www. si. umich. edu/academics/resources/state-art-classrooms-enhance-learning-experience
Bij afstandsonderwijs, de beste student zit…. Whereabouts? Source: http: //hosting. ber-art. nl/wp-content/uploads/global-cloud-computing. jpg Dus learner control
Tweede reden learner control Klantgerichtheid/profiel van de lerende (2) Happy chickens lay better eggs Source: http: //imway 2 fat. wordpress. com/2009/04/02/
Samenvattend, mogelijke voordelen van learner control voor de lerende • • Combinatie werk/zorg voor gezin/studie weisure (Dickinson, 1995) Meer motivatie (Scheiter & Gerjets, 2007; Dickinson, 1995; Kirschner, 2002) Adaptatie cognitive noden (Scheiter & Gerjets, 2007) Meer elaboratie (Daniels, 1996) Learner control en afstandsonderwijs zijn zoals Laurel & Hardy Source: http: //beertjes. blogspot. com/2004_08_01_archive. html
Anderen zeggen…de Nicole en Hugo
5. Learner control en assessment • Learner control is multidimensioneel en contextgebonden – Voor AO • Tijd • Plaats • Ritme • Dus opbouw van flexibel examenorganisatie – Cf. tijd, plaats, ritme • Inbouwen snelle feedback
Concrete maatregelen uitwerken flexibele examenorganisatie • Uitrollen examencentrum (cf. learner control tijd & ritme) – Flexibele examenorganisatie flexiblokken – Toezicht VIVES breed organisaren kost verlagend – Ontwikkelen software online administratie (24/7) • Verhoogde aandacht voor edumatic (cf. learner control tijd & ritme) – Snelle feedback • Examen op afstand (cf. learner control tijd, ritme en plaats) – Ontwikkelkost + onderhoud • Outsourcen – Proctorexam » Betalend voor student (regel afwegen kost: ‘openbaar-vervoer-proof’) • Blijvende administratieve kost (VIVES-breed gebundeld; cf. helpdesk, …)
6. If it walks and talks like a duck … it’s a duck!
6. 1 Effectiviteit van learner control o. m. afhankelijk van • voorkennis (Kopcha & Sullivan, 2008; Scheiter & Gerjets, 2007; von Mizener & Williams, 2008), • zelfregulatie (Eom & Reiser, 2000; Orvis, Fisher, & Wasserman, 2009; Scheiter & Gerjets, 2007), • epistemologische overtuigingen (Scheiter & Gerjets, 2007), • Verder lijkt het dat learner control pas effectief zal zijn als studenten daadwerkelijk van de mogelijkheden die condities met meer learner control bieden, gebruik maken (Large, 1996; Williams, 1996) kennis over mogelijkheden
Onderzoek en learner control? (2) In summary “I have reviewed is that it would be a mistake to interpret the current constructivist view of learning as a rationale for reviving pure discovery as a method of instruction. Pure discovery did not work in the 1960 s, it did not work in the 1970 s, and it did not work in the 1980 s, so after these three strikes, there is little reason to believe that pure discovery will somehow work today. ” (Mayer, 2004, p. 18) 1) People need a ‘nudge’ (Thaler & Sunstein, 2008) Nurture by structure 2) Voorkennis student speelt belangrijke rol
6. 2 Data flexibele organisatie examens, cf. tijd/ritme
Mate van flexi Between-Subjects Factors opdeling aantal momenten 1 2 item in drie categorieën 3 (meest/minst) Tests of Between-Subjects Effects Dependent Variable: nummerieke score die de student krijgt voor examen/opdracht/. . . Type III Sum of Source Squares df Mean Square F Corrected Model 726, 248 a 2 363, 124 21, 733 Intercept 532471, 121 1 532471, 121 31867, 909 Categorie. Momenten. Item 726, 248 2 363, 124 21, 733 Error 60752, 810 3636 16, 709 Total 595137, 573 3639 Corrected Total 61479, 058 a. R Squared = , 012 (Adjusted R Squared = , 011) 3638 Sig. , 000 Value Label meest (cf. 1/3) midden (cf. 1/3) minst (cf. 1/3) N 1198 1286 1155
Impact studentenkenmerken Tijd voor afstuderen (voorkennis) Tests of Between-Subjects Effects Dependent Variable: nummerieke score die de student krijgt voor examen/opdracht/. . . Type III Sum of Source Squares df Mean Square Corrected Model 1497, 193 a 11 136, 108 Intercept 322354, 699 1 322354, 699 Afstudeertermijn 603, 058 3 201, 019 Categorie. Momenten. Item 393, 844 2 196, 922 Afstudeertermijn * Categorie. Momenten. Item Error Total Corrected Total 336, 202 6 56, 034 55815, 959 3361 16, 607 550756, 798 3373 57313, 152 a. R Squared = , 026 (Adjusted R Squared = , 023) 3372 F 8, 196 19410, 831 12, 105 Sig. , 000 11, 858 , 000 3, 374 , 003
6. 3 Flexibile organisatie, cf. plaats, tijd en ritme examen op afstand Systematic search in literature • Databases – ‘Academic search premier’, ‘Business source elite’, ‘ERIC’, ‘Science direct’, ‘Springer’, ‘Web of science’, and ‘Wiley online library’ was done (november 2015); • De zoekstrategie richt zich de ‘higher education’, ‘assessment’, ‘remote(ly)’, en ‘online proctored’; • Criteria: peer-reviewed, published na 2010 en full-text online beschikbaar; • Slechts 2 papers van de 91 hits werden geselecteerd, dit op basis van of ze wel of niet een omschrijving van examen op afstand bevatten.
De eerste studie (Lievens & Burke, 2011) reveleert dat • 1) er is weinig informatie beschikbaar over unproctored internet testing (UIT); • 2) er is geen significant verschil tussen proctored and unproctored internet testing mbt evaluatie score.
Resultaten van de tweede studie (Jordan, 2011) toont dat • 1) assessments zijn veelal slecht uitgewerkt (!); • 2) belang van perceptie van studenten lijkt belangrijk tijdens het implementeren van een computer-gebaseerd assessment; • 3) introductie van nieuwe aanpakken van onderwijskundige technologie kunnen leiden tot verdere (reeds bestaande) sociale uitsluiting; • 4) feedback na een assessment is belangrijk.
Proctorexam in VIVES • Proctorexam combineert webcam, screen sharing, and video recording ifv toezicht tijdens afname examen. • https: //www. vives. be/ontdek-onze-examenmomenten
Methodology: focus op perceptie van studenten • Vragenlijst werd afgenomen via limesurvey • Eerst werden een aantal persoonskenmerken nagegaan; vervolgens de volgende vragen – Waarom examen op afstand? • afstand tot de campus /je kan zelf het examenmoment kiezen / combinatie / andere – Examen op afstand is stressvol. • (1) compleet fout; 2) fout; 3) juist; 4) volledig juist – Examen op afstand is minder stressful dan een examen op campus; • (1) compleet fout; 2) fout; 3) juist; 4) volledig juist – Zou je terug examen op afstand afleggen? • (ja/nee) – Wat was er goed? Wat kan worden verbeterd? • open vraag – Welke ondersteuning is prima en welke ondersteuning wens je bijkomend? • open vraag – Andere opmerkingen? • open vraag
Participanten: 37 studenten
Resultaten Reden? • 11 afstand tot campus • 17 duiden combinatie afstand naar campus en controle over tijd • Andere redenen: benzine kost (=1), experiment (=1). Stress? • 16 van de 37 respondenten vinden examen op afstand stressvol; • 22 participanten vinden examen op afstand minder stressvol dan een examen op campus; – Verdere analyse toont dat participanten die een examen op afstand stressvol ervaren, ook een examen op afstand als meer stressvol ervaren. Andere? • Bijna al de respondenten zullen terug examen op afstand afleggen (=37 van de 38) • Twee studenten zouden graag kunnen vragen stellen tijdens het examen • Twee studenten willen meer technische ondersteuning • Er was de opmerking dat het vreemd aanvoelt dat er niemand te zien is tijdens het examen
6. 4 Studierendement? • Maatregelen ifv flexibele examenorganisatie werden vanaf september 2015 uitgerold (stapsgewijs) • Over een periode van 5 jaar (dus van 2013 -2014 tot 2017 -2018) – Resultaat • Lichte stijging van aantal AO studenten – Opvallend: ondanks dat grootste groep AO studenten (=lerarenopleiding) daalt • Gemiddeld aantal opgenomen studiepunten blijft gelijk • Gemiddeld lijkt de studie-efficiëntie niet veranderd (periode van 4 jaar) • Lichte toename van aantal uitgereikte diploma’s (periode van 4 jaar) – Momenteel veel te vroeg om impact van flexibel examenorganisatie weer te geven
7. Conclusie • Flexibele examenroute in afstandsonderwijs lijkt te werken, dit mits – Nurture by structure • Mate van structuur voorkennis - No murder by structure! – Hou rekening met kost • weerstanden van docenten; • ontwikkelkost; – cf. examenexemplaren, verbeterlast, software, toezicht, … • ‘onderhoudskost’ • ‘rendement’ (waarschijnlijk) pas na langere tijd zichtbaar, dus vrij grote druk op gemaakte keuzes
Prentjes…
Bedankt jean-claude. callens@vives. be Een aantal andere maatregelen die werden genomen om studierendement te verhogen in AO Prioritering van begeleiding, richt je op startende studenten (targeted initiatives) Zorg dat alle studenten goed overweg kunnen met digitale communicatiemiddelen, zoals skype, … Zorg voor een helder taalgebruik, wees duidelijk Creëer een ‘common book experience’, een magazine met verzameling van ervaringen van medestudenten Doe inspanningen voor toename van formele en informele (online) interacties met studenten. Geef studenten advies hoe ze contact kunnen leggen met een docent, zeg hen waar, wanneer en waarvoor docenten bereikbaar zijn Zorg dat je digitale communicatie met studenten AO voldoende gericht is op hun profiel, zodat ze zich aangesproken (en dus betrokken voelen) Zorg voor zeer duidelijke communicatie over de leerresultaten, vermijd daarbij een moeilijk jargon Zorg voor zeer duidelijke omschrijvingen van wat wordt verwacht, tegen wanneer, op welke wijze de opdracht moet worden ingediend, … Zorg voor snelle feedback, na afleggen van examen (richtlijn max. 3 weken) en na het afleggen van een opdracht (richtlijn max. 1 maand), en e-mails (3 werkdagen)
- Slides: 42