Vvoj a perspektvy externho testovania na Slovensku Nrodn

Vývoj a perspektívy externého testovania na Slovensku Národný ústav certifikovaných meraní vzdelávania, Slovensko Testováním ke kvalitě vzdělávání? 22. máj 2015, Praha Paed. Dr. Miroslava Jurenková

NÚCEM Národný ústav certifikovaných meraní vzdelávania Vznikol v roku 2008 zo Štátneho pedagogického ústavu. NÚCEM je zodpovedný za: ü ü ü maturitnú skúšku (EČ, PFIČ MS), Testovanie 5, Testovanie 9, národné (E-Test) a medzinárodné projekty (napr. PISA, PIRLS, TIMSS).

MATURITA since 2000 OECD PISA TALIS TESTING 5 Rrehearsal Exam 2014 2015 NÚCEM International Measurements TESTING 9 since 2005 IEA Civ. Ed. ICCS ICILS SITES TIMSS PIRLS

Východiská a začiatky externého testovania na Slovensku q Zmeny v spoločnosti: q Požiadavka vyššej objektivity a validity hodnotenia na výstupe zo strednej školy q Ambícia dosiahnuť porovnateľnosť výstupnej skúšky so zahraničím q Snaha dosiahnuť akceptovateľnosť výsledkov maturitnej skúšky vysokými školami q Odborná diskusia, analýza situácie v európskych krajinách

MATURITA: vývoj externého testovania q Chýbali prvky validity a reliability. q Nebola možnosť porovnať výsledky žiakov (škola/učiteľ s rôznymi požiadavkami na žiaka). q Nespokojnosť �hodnotenie nenastavené obdobne ako v iných EÚ krajinách, memorizovanie učiva k zvládnutiu skúšky a pod.

MATURITA: vývoj externého testovania q Asociácia riaditeľov, združenia učiteľov a ďalších odborníkov po analýze stavu v iných krajinách (Česko, Maďarsko, Slovinsko) a zo skúseností z národných a medzinárodných projektov navrhli projekt, ktorého cieľom bola implementácia inovovanej maturitnej skúšky na SŠ. q 1998 Ministerstvo školstva zadalo vypracovať koncepciu novej maturitnej skúšky Štátnemu pedagogickému ústavu. q 2000 koncepcia novej formy MS – nový model maturitnej skúšky (porovnateľný s EÚ, externé testy, externe zadávaná PFIČ)

MATURITA: vývoj externého testovania q 2001 – 2003: q pilotné testovania maturitných testov q Do 2004: interná časť MS – iba ústna skúška v kompetenciách školy: overenie vedomostí na centrálne zadané témy/okruhy. q 2004: generálna skúška MS

MATURITA: vývoj externého testovania q 2005 Externá maturita povinná AJ, NJ + MAT Generálna skúška z FJ, RJ, SJ q 2007 Generálna skúška – vyučovacie jazyky, EČ MS z cudzích jazykov (3 úrovne) q 2008 nový školský zákon – založenie NÚCEM (+ T 9, maturita on-line)

Legislatívne zmeny cudzie jazyky • MS 2005 – 2007: úrovne A, B • MS 2008: úrovne A, B, C • MS 2009 – 2016: úrovne B 1, B 2 SERR • MS 2012: GYM (B 2), SOŠ (B 1/B 2) • MS 2013: zmeny hodnotenia MS • MS 2017: C 1 pre bilingválne školy

MATURITA SJL 2000 2001 2002 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 SLSL MJL UJL AJ NJ RJ MONITOR – pilotné test. MATURITA Generálna skúška Maturita on-line FJ ŠPJ TJ MAT Inf F Ch Bio Geo Dej Nos

Prehľad národných testovaní ISCED 1: external T 5 testing ISCED 2: external T 9 testing ISCED 3: external MATURITA

Národné testovania Národné testovanie – stupeň ISCED 2 Celoslovenské testovanie žiakov 5. ročníka ZŠ – T 5 Ø Celoslovenské testovanie žiakov 9. ročníka ZŠ – T 9 Ø Národné testovanie – stupeň ISCED 3 Externá časť maturitnej skúšky Ø Písomná forma internej časti maturitnej skúšky Ø Certifikačné, školské, učiteľské (pilotné) testovania – projekt E-Test

Ciele externej maturitnej skúšky overiť dosiahnuté výsledky vzdelávania absolventov SŠ na výstupe zo stupňa ISCED 3 overiť a hodnotiť tie vedomosti a zručnosti maturantov, ktoré nie je možné overiť v dostatočnej miere v ústnej forme internej časti ovplyvňovať skvalitňovanie výchovno-vzdelávacieho procesu štandardizovať požiadavky na vedomosti a zručnosti maturanta garantovať validitu a objektívnosť hodnotenia dosiahnutých výsledkov

Maturita – základné informácie riadny a náhradný termín preklad zadaní a inštrukcií do maďarského jazyka úpravy pre žiakov so zdravotným znevýhodnením EČ 4 + PFIČ + ÚFIČ povinné/voliteľné predmety Gymnáziá: SJL/MJL, CJ, 2 VO/SJSL+VO SOŠ: SJL/MJL + SJSL, CJ, TČ OZ, PČ OZ max. 2 dobrovoľné predmety

Organizačné zabezpečenie externej časti maturitnej skúšky q NÚCEM spolupracuje s OŠ OÚ, CVTI SR, ŠŠI q Zber údajov o žiakoch prihlásených na EČ MS q Tvorba a grafická úprava testov, OH, organ. pokynov q Tlač testov a OH q Balenie a distribúcia zásielok q Skenovanie a spracovanie dát z OH q Štatistické spracovanie, výsledkové listiny q Distribúcia výsledkov (poštou, elektronicky) q Podrobné štatistické analýzy výsledkov testov, q Kontrola objektivity (nečestné správanie a hodnotenie na školách)

Testovacie nástroje q Plánovanie a špecifikácia q Tvorba položiek q Zostavenie pilotných testov q Pilotáž q Analýza výsledkov pilotáže q Zostavenie testov q Odborná recenzia q Preklad do maďarského jazyka q Grafická úprava testov q Tvorba kľúča správnych odpovedí q Pokyny na hodnotenie

UVO = úlohy s výberom odpovede UKO = úlohy s krátkou odpoveďou MATURITA Predmety Čas PFIČ EČ čas & test 90 min 150 min (SJL, MJL, UJL + SJSL) (40 UVO + 24 UKO) vyučovacie jazyky cudzie jazyky B 2 level cudzie jazyky B 1 level matematika 60 min - 120 min (46 UVO + 34 UKO ) 100 min (36 UVO + 24 UKO) 120 min (20 UVO + 10 UKO)

MATURITA – počty žiakov a škôl The Number of Schools and Students Participating in Maturita – ISCED 3 80 000 60759 62177 62397 60301 60732 62 263 60369 59383 60 000 1200 1000 56345 51965 50215 800 40 000 591 27972 472 20 000 768 686 613 759 755 756 764 751 739 600 631 15751 222 400 5619 0 2001 2002 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014 Generálna skúška MONITOR MATURITA number of students number of schools

Národné merania – T 5, T 9 Slovenský jazyk a literatúra Testovanie žiakov 5. ročníka ZŠ – Testovanie 5 Testovanie žiakov 9. ročníka ZŠ – Testovanie 9 Čas riešenia 60 minút Počet testových úloh 30 úloh Počet testových úloh 25 úloh Forma testových úloh 25 uzavretých úloh s výberom odpovedí zo 4 možností 10 otvorených úloh s tvorbou odpovede Forma testových úloh 20 uzavretých úloh s výberom odpovedí zo 4 možností Počet úloh § 24 úloh viažucich sa na 4 ukážky – ku každej ukážke sa viaže 6 úloh (4 uzavreté a 2 otvorené úlohy / 1 ukážka) § 6 voľných úloh – niektoré sa viažu na kratšie texty (4 uzavreté a 2 otvorené úlohy) § 15 úloh viažucich sa na 3 ukážky – ku každej ukážke sa viaže 5 úloh Počet úloh § Jazyk a komunikácia – 12 úloh § Komunikácia a sloh – 6 úloh Testované oblasti § Čítanie a literatúra – 12 úloh § Čítanie s porozumením – 50 % úloh viazaných na kontext § Texty primerané žiakom 5. ročníka ZŠ § Poézia, próza § Súvislé i nesúvislé texty Charakteristika textov § Autentické i upravené texty § Umelecké aj odborné texty § Texty z rôznych médií (denná tlač, internet, časopisy a pod. ) Testované oblasti § 10 voľných úloh – niektoré sa viažu na kratšie texty § Slovenský jazyk – zvuková rovina jazyka a pravopis, významová/lexikálna rovina, tvarová/morfologická rovina, syntaktická/skladobná rovina, sloh § Literárna výchova – všeobecné pojmy, literárne druhy, literárne žánre, štruktúra diela, štylizácia textu, metrika § Čítanie s porozumením - 50 % úloh viazaných na kontext § Autentické i upravené texty primerané žiakom 9. ročníka ZŠ (súvislé i nesúvislé) § Umelecké, publicistické i odborné texty blízke mladým ľuďom, ktoré spadajú do Charakteristika textov skúseností žiakov a s ktorými sa môžu 19 živote, stretnúť v každodennom § Texty z rôznych médií (denná tlač, internet)

Národné merania – T 5, T 9 Matematika Testovanie žiakov 5. ročníka ZŠ – Testovanie 5 Testovanie žiakov 9. ročníka ZŠ – Testovanie 9 Čas riešenia 60 minút Čas riešenia 70 minút Počet testových úloh 30 úloh Počet testových úloh 20 úloh § 20 otvorených úloh s krátkou číselnou odpoveďou Forma testových úloh § 10 uzavretých úloh s výberom odpovede zo 4 možností § 10 otvorených úloh s krátkou číselnou odpoveďou Forma testových úloh § 10 uzavretých úloh s výberom odpovede zo 4 možností Tematické okruhy § Čísla, premenná a počtové výkony s číslami § Postupnosti, vzťahy, funkcie, tabuľky, diagramy § Geometria a meranie § Riešenie aplikačných úloh a úloh rozvíjajúcich špecifické matematické myslenie Tematické okruhy § Čísla, premenná a počtové výkony s číslami § Vzťahy, funkcie, tabuľky, diagramy § Geometria a meranie § Kombinatorika, pravdepodobnosť, štatistika § Logika , dôvodenie, dôkazy Požiadavky na vedomosti a zručnosti V súlade so Štátnym vzdelávacím programom Charakteristika úloh § Úlohy viazané na matematický kontext a na kontext praktického života § Prvky finančnej gramotnosti Charakteristika úloh § Úlohy viazané na matematický kontext a na kontext praktického života v pomere 1 : 1 § Prvky matematickej a finančnej gramotnosti

TESTING 9 – údaje The Number of Schools and Pupils Participating in Monitor 9 and Testing 9, ISCED 2 3 000 66 017 64 228 59 819 60 000 58 009 2 500 54 463 47 563 40 000 1 419 1 343 45 400 1 558 43 513 2 000 41 791 42 027 1 500 1 470 1 466 1 461 1 453 1 461 1 451 1 449 1 443 1 448 1 000 20 000 16 665 16 002 500 0 0 2003 2004 2005 2006 2007 2008 2009 Monitor 9 2010 2011 2012 Testing 9 number of pupils number of schools 2013 2014

Perspektíva národných meraní MATURITA Pridaná hodnota TESTOVANIE 9 Pridaná hodnota TESTOVANIE 5

Kvalita vo vzdelávaní Zisťovanie pridanej hodnoty Percentilová - - metóda Pridaná hodnota (PH) ako rozdiel percentilov na konci a na začiatku porovnávaného obdobia PH je relatívna voči PH ostatných škôl Nadobúda kladné alebo záporné hodnoty, čo znamená, že postavenie školy sa medzi ostatnými buď zlepšilo, alebo zhoršilo

Národný projekt: E-test Aktivita Tvorba testov a úloh: Školské for 1. 1. a učiteľské testovania (Školská banka úloh), national testing (NUCEM banka úloh). 30, 000 nových úloh & testov – autormi sú učitelia v spolupráci s expertmi – garanti, posudzovatelia, supervízor. Školenia zamerané na tvorbu testov.

Národný projekt: E-test Aktivita 1. 2. Implementácia elektronického testovania. Spolupráca s IBM: vývoj softvéru na tvorbu úloh a testov, e-testovanie a banku úloh. Školenia Tvorba personálu škôl: IT administrátori. výskumných analýz a správ. Hodnotenie a porovnávanie kvality škôl, monitorovanie indikátorov pridanej hodnoty.

Národný projekt „Zvyšovanie kvality vzdelávania na základných a stredných školách s využitím elektronického testovania“ Tvorba testovacích nástrojov Tvorba samostatných úloh, z ktorých sú na základe zadefinovaných špecifikácií zostavované a generované testy Priama tvorba testov na základe zostavených testových predlôh Vytvorená databáza úloh a testov bude sprístupnená učiteľom na využitie vo vyučovacom procese (školská databáza úloh) pre NÚCEM pre účely externe a objektívne vyhodnocovaných meraní výsledkov škôl (NÚCEM databáza úloh)

Tradičné testovanie vs. E-testovanie ? ? ? Aké typy úloh môžeme využiť v testovaní cudzích jazykov? Vyzerá to jednoducho. . . Elektronické testovanie ako súčasť celonárodných testovaní

Projekt E-Test Elektronické testovanie (typy úloh) Multiple choice (s 1 možnou odpoveďou – Single choice) Multiple choice (s viacerými možnými odpoveďami) Fill (1 prázdne pole na odpoveď) Custom Fill (viac polí na odpoveď) Ordering (umiestnenie slov/obrázkov do správneho poradia) Single choice matrix (matica s výberom 1 správnej odpovede) Multiple choice matrix (matica s možnosťou výberu viacerých správnych odpovedí) Marking words (označovanie slov) Drag & Drop (presunutie obrázku/slova pomocou kurzoru) True/false (určenie pravdivosti/nepravdivosti výpovede) Hotspot (výber obrázka/označenie časti obrázka) File upload (nahratie súboru)

Predmety: E-testovanie Jazyk a komunikácia (SJL, MJL, SJSL, AJ, NJ, RJ) Človek a príroda (Bio, Fyz, Chem) Človek a spoločnosť (Dej, Geo, Nos) Matematika a práca s informáciami (MAT, Inf)

E-testovanie – veľtrh pre študentov Ocenenie študenta – logo projektu

Ďakujem za pozornosť Paed. Dr. Miroslava Jurenková miroslava. jurenkova@nucem. sk

Výsledky – MS (infoportál) http: //vysledky. nucem. sk/vysl edky 2014/maturita. php 2012 2013 2014

Maturitná skúška – predmety

Maturitná skúška 2014 http: //vysledky. nucem. sk/vysl edky 2014/maturita. php