Test krimo procesas Testo apraas Uduotys Joana Pribuauskait

Testų kūrimo procesas Testo aprašas Užduotys Joana Pribušauskaitė, VU Lituanistinių studijų katedra, 2006 -06 -29 joana. pribusauskaite@flf. vu. lt Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Testo kūrimo etapai (ciklas) n n Naujo testo poreikis Planavimas Projekto rengimas (pirminis aprašas) Parengiamieji darbai q q q n n Bandymas Pirminis testavimas Įvertinimas/patikrinimas Testo veikimas Stebėjimas Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Planavimas ir projekto rengimas n n Kandidatai Pirminis testo aprašas q q q n Testo forma Sudedamosios dalys (sandai) Užduočių skaičius ir tipai, jų tikrinimo židiniai Temos Vertinimas (kriterijai) Rezultatų apskaičiavimas Materialinė bazė Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Parengiamieji darbai n n Bandymas Pirminis testavimas q q q n n “tikri” kandidatai statistiškai reikšmingas duomenų kiekis visų testo elementų tikrinimas (punktų, užduočių formuluočių, vertinimo kriterijų ir pan. ) Rezultatų analizė Pirminio aprašo taisymas Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

“Veikiantis” testas, stebėjimas n n n Kandidatų ir testo vykdytojų komentarų kaupimas Peržiūrėtinų ir keistinų dalykų nustatymas Naujos patirties ir testavimo teorijos pasiekimų taikymas Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Kalbos mokėjimas Bachmano ir Palmerio modelis n Organizacinės žinios q q q Gramatikos mokėjimas (sintaksė, morfologija, fonetika, rašyba ir skyryba) Teksto supratimas (retorinė organizacija, kohezija) Žodyno mokėjimas (reikšminės ypatybės, denotacija, konotacija) Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

n Praktinės žinios (pragmatika) q q Funkcinės žinios (ideacinės – idėjų, žinių perteikimas, manipuliacinės – poveikis aplinkai, euristinės – bendrųjų žinių plėtimas, kalbinės vaizduotės – kūryba) Sociolingvistinės žinios (kalbos vartojimo normos, tarmės, registrai, funkciniai stiliai, natūralumas) Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Testo modelis n n n n Sandų skaičius Sando vertė (viso testo atžvilgiu) Bendras taškų skaičius Kiekvieno sando užduočių skaičius (jei reikia – ir pirminiai taškai) Užduočių židiniai Užduočių ir punktų tipai Visų užduočių įvestys (tekstai, grafinė medžiaga) Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Testo modelį ir užduočių tipus lemia: n Profesiniai motyvai q q Kokiose gyvenimo situacijose kandidatui reikia vartoti kalbą Kokio kalbos mokėjimo lygio reikia kandidatų atliekamiems socialiniams vaidmenims Kokie įvykiai būdingi tokioms situacijoms ir tokiems socialiniams vaidmenims Kokią informaciją turi gauti socialiniai partneriai Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

n Praktiniai motyvai q q q Egzaminuotojų ir auditorijų kiekis Kandidatų skaičius ir trukmė Egzaminuotojų ir vertintojų rengimas Pageidaujami užduočių tipai Rezultatų skelbimo būdas Kokybės kontrolės būdas Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

n Ribojantys veiksniai q q q Egzamino priimtinumas socialiniams partneriams Egzamino ir mokymo programų bei viso proceso dermė Egzamino sunkumas Visuomenės samprata, koks turi būti tokios rūšies egzaminas Egzamino rengimo, vykdymo ir rezultatų skelbimo tinkamumas Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Galutiniame egzamino apraše nurodoma n n n Bendra trukmė, kiekvieno sando atlikimo laikas Iš kiek dalių susideda Kiek punktų kiekvienoje dalyje Punktų ir užduočių tipai Punktų ir užduočių židiniai Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

n n n Įvesties tekstų tipai Iš kur imami tekstai (periodika, enciklopedijos, kelionių žurnalai, interneto straipsniai ir pan. ) Bendras žodžių skaičius, atskirų užduoties dalių apimtis (pasirinkčių, įvesties ir pan. ) Užduočių pateikimo forma Temų parinkimas Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

n n Taškų skaičius: bendras ir kiekvienos užduoties Taškų perskaičiavimas (jei už kurią dalį skiriami pirminiai taškai) Rašymo ir kalbėjimo vertinimo kriterijai Kaip vertinama: teisingų atsakymų lapas, tikrintojų darbo koordinavimas, rezultatų žymėjimas Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

n n n Kiek yra egzaminuotojų ir vertintojų, pvz. , kiek specialiai parengtų žmonių vertina kalbėjimo ir rašymo atliktis Kalbėjimo užduočių stimulai Rezultatų skelbimas kandidatams ir socialiniams partneriams (žemiausių reikalavimų rinkinys, vertimas pažymiais ir pan. ) Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

n n n Egzamino data, sąlygos Galimybė kandidatams peržiūrėti įvertintą darbą Pasirengimas egzaminui: per kiek laiko galima pasirengti, pagal kokias programas ir vadovėlius ir pan. Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Testų ypatybės n n n Pagrįstumas: ar matuojama tai, kas numatyta matuoti? Patikimumas: Ar galima pasitikėti testo rezultatais? Užduočių skiriamoji geba: ar užduotys atskiria stipresniuosius kandidatus nuo silpnesniųjų? Užduočių sunkumas: ar buvo užduočių ir stipresniems, ir silpnesniems? Objektyvumas: ar rezultatai nepriklauso nuo vertintojų? Praktiškumas: kiek kainuoja parengimas ir vykdymas? Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Pagrįstumas n Turinio pagrįstumas q q kiek išsamiai ir visapusiškai tikrinami mokymo programose numatyti dalykai; kiek apimamas mokomosios medžiagos turinys kiek atspindimi mokymo tikslai ar užduotys sudaro tikrinamų žinių ar gebėjimų srities reprezentatyvią imtį Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

n Kriterinis pagrįstumas kiek testo rezultatai koreliuoja su kitokiais tų pačių gebėjimų matavimais (kitų testų, praktinės veiklos rezultatais) n Konstrukto pagrįstumas Kiek testas atspindi esminius teorijos aspektus (pvz. , tikrinant komunikacinę kompetenciją - ar aiškūs užduočių komunikaciniai tikslai, ar tikrinama vartosena realiose gyvenimo situacijose) n Išvaizdos pagrįstumas Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Užduotys n Susideda iš užduoties formuluotės, punktų ir numatomų atsakymų. n Pateikiamas tipiškas pavyzdys, nurodantis užduoties židinį. Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Punktų rengimo taisyklės n n n Tikrinama svarbi informacija Turi būti laikomasi gramatikos taisyklių Jei naujas punktų tipas, pateikiamas tipiškas pavyzdys Tekstu grindžiami punktai: netinka, jei galima atsakyti iš patirties ar bendro išsilavinimo Tikrinant bendrą teksto supratimą, punktai pateikiami prieš tekstą, tikrinant detales - po Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Užduočių (punktų) tipai A. Rinkimosi užduotys (punktai) n Rinkimasis iš kelių pasirinkčių n “Teisingų/neteisingų” teiginių parinkimas (teiginių įvertinimas) n Tarpų užpildymas renkantis iš kelių pasirinkčių n Tarpų užpildymas renkantis iš sąrašo (arba – pastraipos lygiu) n Siejimo užduotis (atitikmenų parinkimas) n Daugkartinis atitikmenų siejimas n Klaidų radimas Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Rinkimosi (A tipo) užduočių trūkumai n n n n Tikrina atpažinimą, ne produkavimą Negalima patikrinti visų gebėjimų Riboja kandidatų saviraišką Dažnai priklauso nuo skaitymo gebėjimų Leidžia spėti Daug laiko reikia sukurti Skurdina mokymo procesą (atgalinis testų poveikis) Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Reikalavimai kelių pasirinkčių užduotims n n n Teisingas turi būti tik vienas atsakymas – kiti be jokių išlygų neteisingi Turi būti pateikiamas minimalus reikalingas kontekstas – kad jo nereikėtų susikurti Teisingasis atsakymas neturi išsiskirti išoriškai nei ilgumu, nei sakinio sudėtimi Gramatiškai turi tikti visi atsakymai Jei atsakymą galima pateikti neskaičius/ neklausius teksto, vadinasi, jis netikrina teksto supratimo Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

n n n Atsakymai neturi būti daugiaprasmiai, vertinamieji (pvz. , lengva išmokti, norėjo padaryti gražiau. . . ) Trukdžiai turi būti patrauklūs – kad nebūtų galima atlikti atmetant aiškiai netinkamus Netinkamos pasirinktys neturi būti siauresnės reikšmės sinonimai Klaidingos pasirinktys neturi specialiai painioti – tikrinamos žinios, o ne orientacija Reikia vengti dvigubų neiginių Jei 2 pasirinktys yra absoliučiai priešingos reikšmės, tai riboja rinkimąsi (arba abu atmestini, arba renkamasi tik iš dviejų) Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

B. Punktai, kurių atsakymus pateikia kandidatas n Trumpų atsakymų punktai n Sakinių baigimas n Laisvasis tarpų užpildymas n Sakinių keitimas n Žodžių sudarymas n Keitimas ir tarpų užpildymas n Užrašų išplėtimas n Klaidų taisymas n Informacijos perkėlimas Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

C. Punktais neskirstomos užduotys n Rašymas (rašinys, esė) n Kalbėjimo užduotys q q Temos pasakojimas Pasakojimas remiantis paveikslėliais Kalbėjimas remiantis rašytiniais tekstais Sankaita Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Tekstai: autentiškumas ir natūralumas n Autentiškumas q q tekstai – “gyvenimiško” kalbos vartojimo pavyzdžiai (iš laikraščių, žurnalų, knygų, skirtų gimtakalbiams) teksto ir skaitytojo tarpusavio sąveika (kiek skaitytojui suprantami faktai ir kultūros reiškiniai Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Tekstų ir užduočių natūralumas Situacijų natūralumas Atliekant užduotį reikia vartoti tokią pat kalbą, kaip gyvenime n Situacijų būdingų bruožų išskyrimas ir atkūrimas teste Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

n Tarpusavio sąveikos natūralumas q q Tekstai, situaciniai kontekstai ir užduotys turi mėgdžioti tikrovę, o ne kopijuoti Situacijos turi būti pažįstamos ir svarbios tam tikro lygio testuojamiesiems Aiškus užduoties tikslas ir kontekstas Aiškūs vertinimo kriterijai Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Tekstų sunkumas n n Kalbos sudėtingumas Kontekstas n lengviau suprantamas tiesioginis kreipimasis į skaitytoją ar klausytoją, o ne kitų veikėjų sąveika n padeda suprasti iliustracijos ir vaizdas n neribojamas laikas q gerai motyvuota užduotis n n teksto turinys: veikėjai, siužeto linijos ir pan. tarpusavio sąveikos tipas: oficialus, neutralus, neoficialus Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Klausymo tekstai n n n Lengviau suprantamas monologinis tiesioginis kreipimasis; dialogai: kai skirtingi veikėjai, jų socialiniai vaidmenys ir pan. Aiškus kontekstas Kalbos perteklius Neutralus stilius Natūralus tempas, tolygus kalbėjimas Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA

Ačiū už kantrybę – ir gero vakaro! ☺ Pribušauskaitė, 2006 -06 -29 EUROPOS SÀJUNGA