Analiza i interpretacja wynikw egzaminu smoklasisty wykorzystanie wnioskw

Analiza i interpretacja wyników egzaminu ósmoklasisty, wykorzystanie wniosków z analizy do poprawy jakości kształcenia Joanna Maźniewska 6 luty 2019 r.

System egzaminów zewnętrznych to narzędzie pozwalające na zmierzenie efektywności pracy nauczyciela/szkoły w zakresie sprawdzanym przez egzamin

SZKOŁA UCZEŃ ORGAN PROWADZĄCY Wynik egzaminu ORGAN NADZORUJĄCY MEN SZKOŁA WYŻSZEGO SZCZEBLA

Szkolna analiza wyników egzaminu to wnioskowanie o osiągnięciach uczniów

Analiza wyników egzaminów powinna: q prowadzić do ustalenia takich obszarów, w których osiągnięcia uczniów są zadowalające i niezadowalające, q uświadomić konieczność włączenia wymagań ogólnych i szczegółowych podstawy programowej w ciągły proces dydaktyczny, q uświadomić potrzebę monitorowania osiągnięć uczniów z wykorzystaniem zasad oceniania kryterialnego stosowanych podczas egzaminów q uwzględniać konteksty oceniania: szkolne, środowiskowe, indywidualne, q prowadzić do refleksji nad jakością własnej pracy.

Do przeprowadzenia analizy potrzebne są: q Raport OKE zawierający: • statystyczny opis egzaminu i jego wyników (analizę ilościową), • analizę jakościową zadań; q Wyniki szkoły; q Wyniki badań kontekstowych, programy nauczania, nauczycielskie plany wynikowe

Etapy analizy wyników egzaminu q analiza ilościowa wyników szkoły na tle wyników województwa, miasta, kraju q analiza zakresu treści egzaminu q określenie mocnych i słabych stron uczniów q sformułowanie wniosków wynikających z analizy q sformułowanie rekomendacji wynikających z wniosków

Analiza ilościowa wyników Zebranie, zestawienie, statystyczne opracowanie i interpretacja danych uzyskanych podczas egzaminu – wskaźniki statystyczne. Opiera się na analizie statystycznej, dzięki czemu uzyskujemy możliwość dokładniejszego porównaniami opisu badanych grup.

Wskaźniki statystyczne Analiza wyników testowania: qśrednia arytmetyczna (X) qmediana (Me)- wynik środkowy -porównujemy ze średnią; wyższa od średniej pokazuje, że uczniów z wynikiem wyższym od średniej jest więcej, test był dla nich łatwy qmodalna (Mo) -wynik uzyskiwany przez największą liczbę testowanych; wynik najbardziej typowy qnajwyższy i najniższy wynik

Średnia (X) Możemy porównywać średnią szkoły ze średnią: q uzyskaną przez inną szkołę q województwa q kraju Możemy porównywać średnią klasy ze średnią: q innych klas q szkoły

Analiza miar tendencji centralnej czyli X, Me, Mo, pozwala na sformułowanie wniosków o trudności testu dla danej populacji zdających

Prezentacja arkusza do analizy wyników CKE 12/3/2020 www. sod. ids. czest. pl 12

Wyniki egzaminu ósmoklasisty z j. polskiego w szkole X (wyniki w punktach) Parametry statystyczne Klasa A Klasa B Szkoła Wynik średni (średnia arytmetyczna – X) 15, 4 14, 3 14, 86 Wynik środkowy (mediana – Me) 12, 5 10 12 Modalna – Mo 7 3 20 Wynik najwyższy 39 40 40 Wynik najniższy 5 1 1 Rozstęp 34 39 39

Wyniki egzaminu ósmoklasisty z j. angielskiego w szkole X (wyniki w punktach) Parametry statystyczne Klasa A Klasa B Szkoła Wynik średni (średnia arytmetyczna – X) 25, 20 21, 56 23, 78 Wynik środkowy (mediana – Me) 19 14, 5 15 Modalna – Mo 9 16 15 Wynik najwyższy 57 7 50 Wynik najniższy 57 8 49 Rozstęp 57 7 50

Wyniki egzaminu ósmoklasisty z matematyki w szkole X (wyniki w punktach) Parametry statystyczne Klasa A Klasa B Szkoła 9, 64 7, 37 8 Wynik środkowy (mediana – Me) 10 5, 5 6 Modalna – Mo 7 6 7 Wynik najwyższy 21 24 24 Wynik najniższy 1 0 0 Rozstęp 20 24 24 Wynik średni (średnia arytmetyczna – X)

Zastosowanie podstawowych miar tendencji centralnej Rozkład symetryczny – średnia, mediana i modalna przyjęły tę samą wartość (taki rozkład wyników bardzo rzadko występują w praktyce szkolnej) Rozkład asymetryczny lewostronnie (lewoskośny) – powstaje, gdy średnia jest niższa od mediany i modalnej, oznacza, że uczniowie w większości uzyskali wysokie wyniki na teście czy egzaminie, test okazał się łatwy Rozkład asymetryczny prawostronnie (prawoskośny) – modalna jest niższa od mediany, a mediana niższa od średniej, oznacza, że uczniowie w większości uzyskali niskie wyniki na teście czy egzaminie, bo zadania okazały się dla nich zbyt trudne

Rozkład wyników szkoły – j. polski Rozkład wyników w szkole 5 Liczba uczniów 4 3 2 1 0 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 Liczba punktów

Rozkład wyników szkoły – j. angielski Rozkład wyników w szkole 5 Liczba uczniów 4 3 2 1 0 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 Liczba punktów

Rozkład wyników szkoły – matematyka Rozkład wyników w szkole 5 Liczba uczniów 4 3 2 1 0 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 Liczba punktów 18 19 20 21 22 23 24 25 26 27 28 29 30

Pułapki średniej arytmetycznej q Porównywanie klas § Kl. A – 85%, 87%, 20% § Kl. B – 65%, 64%, 63% § X= 64 q Porównywanie wyników szkoły w różnych latach lub śledzenie trendów osiągnięć

Skala staninowa Znormalizowana skala standardowa, w której wszystkie wyniki uczniów poddanych egzaminowi porządkuje się od najwyższego do najniższego i dzieli się na dziewięć nierównych frakcji. Daje możliwość porównania wyników z różnych lat niezależnie od trudności testu i potencjału uczniów.

Analiza jakościowa Analiza zakresu treści arkusza to szczegółowa analiza, jakie wiadomości i umiejętności były sprawdzane poszczególnymi zadaniami arkusza, do jakich wymagań ogólnych i szczegółowych podstawy programowej te zadania należą oraz jakie są ich wskaźniki łatwości (poziom wykonania zadania).

Co to jest wskaźnik łatwości zadania? łatwość zadania (p) - stosunek liczby punktów uzyskanych za rozwiązanie danego zadania przez wszystkich uczniów do maksymalnej liczby punktów możliwych do uzyskania za to zadanie, mieści się w przedziale od 0 do 1 Współczynnik łatwości stosowany w pomiarze dydaktycznym odpowiada nam na pytanie, czy osiągnięcia ucznia są jego mocną czy słabą stroną. 12/3/2020 www. sod. ids. czest. pl 23

Interpretacja stopnia opanowania umiejętności q Jeżeli p = 0, 50 to dana umiejętność jest opanowana w stopniu koniecznym q Jeżeli 0, 5< p < 0, 7 to to dana umiejętność jest opanowana w stopniu niżej zadawalającym. q Jeżeli p ⋝ 0, 7 to dana umiejętność jest opanowana w stopniu zadowalającym.

Interpretacja wskaźnika łatwości zadań Wartość wskaźnika łatwości (p) 0 -0, 19 0, 20 -0, 49 0, 50 -0, 69 0, 70 -079 0, 80 -0, 89 0, 90 -1 Interpretacja wskaźnika bardzo trudne umiarkowanie trudne łatwe bardzo łatwe Stopień osiągnięć uczniów bardzo niski niżej zadawalający dobry bardzo dobry

Wartości wskaźnika łatwości zadań standardowego arkusza z matematyki w szkole, województwie, kraju Nr zadania Sprawdzane umiejętności Uczeń: Wartość wskaźnika łatwości zadań szkoła 1 2 3 4 5 6 odczytuje i interpretuje dane przedstawione w tekstach, tabelach, diagramach i na wykresach, czyta ze zrozumieniem tekst zawierający informacje liczbowe odczytuje i interpretuje dane przedstawione w tekstach, tabelach, diagramach i na wykresach, dostrzega zależności między podanymi informacjami, porównuje różnicowo i ilorazowo liczby naturalne, zamienia i prawidłowo stosuje jednostki masy: gram, kilogram, dekagram, tona stosuje obliczenia procentowe do rozwiązywania problemów w kontekście praktycznym, również w przypadkach wielokrotnych podwyżek lub obniżek danej wielkości rozpoznaje liczby naturalne podzielne przez 2, 3, 5, 9, 100, rozkłada liczby dwucyfrowe na czynniki pierwsze, znajduje największy wspólny dzielnik (NWD) oraz wyznacza najmniejszą wspólną wielokrotność dwóch liczb naturalnych metodą rozkładu na czynniki, rozpoznaje wielokrotności danej liczby oblicza pola wielokątów metodą podziału na mniejsze wielokąty lub uzupełniania do większych wielokątów, do rozwiązywania zadań osadzonych w kontekście praktycznym stosuje poznaną wiedzę z zakresu arytmetyki i geometrii oraz nabyte umiejętności rachunkowe, a także własne poprawne metody w sytuacji praktycznej oblicza: drogę przy danej prędkości i danym czasie, prędkość przy danej drodze i danym czasie, czas przy danej drodze i danej prędkości; stosuje jednostki prędkości: km/h, m/s, porównuje różnicowo i ilorazowo liczby naturalne. 0, 62 0, 22 0, 32 0, 38 0, 35 woj. kraj

Wartości wskaźnika łatwości zadań standardowego arkusza z matematyki w szkole, województwie, kraju Nr zadania Sprawdzane umiejętności Uczeń: Wartość wskaźnika łatwości zadań szkoła 7 zaokrągla ułamki dziesiętne, porównuje liczby naturalne. 8 szacuje wielkość danego pierwiastka kwadratowego lub sześciennego oraz wyrażenia arytmetycznego zawierającego pierwiastki oblicza średnią arytmetyczną kilku liczb 9 10 11 12 13 19 przeprowadza proste doświadczenia losowe, polegające na rzucie monetą, rzucie sześcienną kostką do gry, rzucie kostką wielościenną lub losowaniu kuli spośród zestawu kul, analizuje je i oblicza prawdopodobieństwa zdarzeń w doświadczeniach losowych stosuje oznaczenia literowe nieznanych wielkości liczbowych i zapisuje proste wyrażenie algebraiczne na podstawie informacji rozpoznaje i nazywa trójkąty ostrokątne, prostokątne, rozwartokątne, równoboczne i równoramienne, stosuje twierdzenie o sumie kątów wewnętrznych trójkąta znajduje środek odcinka, którego końce mają dane współrzędne (całkowite lub wymierne) oraz znajduje współrzędne drugiego końca odcinka, gdy dany jest jeden koniec i środek do rozwiązywania zadań osadzonych w kontekście praktycznym stosuje poznaną wiedzę z zakresu arytmetyki i geometrii oraz nabyte umiejętności rachunkowe, a także własne poprawne metody, zna i stosuje w sytuacjach praktycznych twierdzenie Pitagorasa (bez twierdzenia odwrotnego 0, 46 0, 19 0, 27 0, 14 0, 35 0, 43 0, 46 0, 05 woj. kraj

Interpretacja wskaźnika łatwości zadań arkusza egzaminacyjnego 0 - 0, 19 0, 20 - 0, 49 bardzo trudne 0, 50 - 0, 69 umiarkowanie trudne województwo śląskie moja szkoła 8, 10, 16, 18, 19 2, 3, 4, 5, 6, 7, 9, 11, 12, 13, 14, 15, 17, 20, 21 1 5 zadań 1 zadanie 0, 70 - 0, 89 0, 90 - 1 łatwe bardzo łatwe

Łatwość testu i wymagań ogólnych • Łatwość testu (p) - stosunek sumy punktów uzyskanych za rozwiązanie wszystkich zadań do liczby punktów możliwych do uzyskania. Wskaźnik łatwości przyjmuje wartości z przedziału 0 -1. • Łatwość wymagań ogólnych(p) - stosunek sumy punktów uzyskanych za rozwiązanie zadań danego wymagania do liczby punktów możliwych do uzyskania. Wskaźnik łatwości przyjmuje wartości z przedziału 0 -1.

Łatwość arkusza w szkole p= 0, 27 arkusz z matematyki trudny

Łatwość wymagań ogólnych Klasa A 1 0. 9 0. 8 0. 7 0. 6 0. 5 0. 4 0. 36 0. 29 0. 3 0. 29 0. 2 0. 1 0 I II Obszar wymagań ogólnych III I. Sprawność rachunkowa – 3 zadania II. Wykorzystanie i tworzenie informacji – 8 zadań III. Wykorzystanie i interpretowanie reprezentacji – 6 zadań IV. Rozumowanie i argumentacja– 4 zadania IV

Łatwość wymagań ogólnych Klasa B 1 0. 9 0. 8 0. 7 0. 6 0. 5 0. 4 0. 3 0. 24 0. 27 0. 25 0. 20 0. 1 0 I II Obszar wymagań ogólnych III I. Sprawność rachunkowa – 3 zadania II. Wykorzystanie i tworzenie informacji – 8 zadań III. Wykorzystanie i interpretowanie reprezentacji – 6 zadań IV. Rozumowanie i argumentacja– 4 zadania IV

Łatwość wymagań ogólnych Klasa A i B 1 0. 9 0. 8 0. 7 0. 6 0. 5 0. 4 0. 36 Klasa A 0. 36 0. 29 0. 3 0. 27 0. 24 0. 25 Klasa B 0. 29 0. 20 0. 2 0. 1 0 I II Obszar wymagań ogólnych III I. Sprawność rachunkowa – 3 zadania II. Wykorzystanie i tworzenie informacji – 8 zadań III. Wykorzystanie i interpretowanie reprezentacji – 6 zadań IV. Rozumowanie i argumentacja– 4 zadania IV

Zadania bardzo trudne – 19, łatwość 0, 05 www. sod. ids. czest. pl

Typowe błędy q …… q …. . Przyczyny błędów q …. . 12/3/2020 www. sod. ids. czest. pl 35

Wnioski z analizy wyników q ustalenie mocnych i słabych stron zdających w zakresie danego przedmiotu, q wskazanie umiejętności, które nie zostały opanowane w stopniu zadowalającym, q uwzględnienie wniosków zawartych w sprawozdaniu OKE

Rekomendacje – sposób i kierunek działania qpowinny wynikać z wniosków własnych i OKE, qmuszą być konkretnymi propozycjami działań, które pomogą wzmocnić słabe strony, qzazwyczaj odnoszą się do przedmiotowego i szkolnego systemu kształcenia

Planowanie pracy w kontekście wyników egzaminu oraz wymagań ogólnych i szczegółowych podstawy programowej

Tylko realizacja wszystkich wymagań edukacyjnych zawartych w podstawie programowej jest gwarantem sukcesu uczniów na egzaminie

Dziękuję za uwagę i życzę sukcesów egzaminacyjnych Joanna Maźniewska 12/3/2020 j. mazniewska@sod. edu. pl www. sod. ids. czest. pl 40