Transcript Omówienie i podsumowanie testów diagnostycznych na wejście do

Badania osiągnięć uczniów – analiza wyników
Henryk Szaleniec
Zagadnienia
Jaki jest ogólny wynik diagnozy?
Dlaczego nie można porównywać wyników surowych (średnie)
z I i II diagnozy?
Jakie wyniki uzyskano w I i II diagnozie w odniesieniu do wyników
wszystkich biorących udział w projekcie: szkoła klasa, uczeń?
Jak można wykorzystać analizę z obydwu diagnoz łącznie?
W jakich miarach
(skalach) komunikowane są wyniki?
Trzy rodzaje skal dla każdej diagnozy
• Skala wyników surowych dla ucznia, wynik średni
dla klas, wynik średni dla szkół,
• Przedziałowa skala staninowa, która została
unormowana dla każdej diagnozy osobno na
podstawie wyników wszystkich uczniów i szkół
biorących udział w diagnozie,
• Skala centylowa (rangowa) pokazująca miejsce
wyniku w wynikach całej populacji unormowana
na podstawie wyników wszystkich uczniów i szkół
biorących udział w diagnozie
Test
matematyka I
matematyka II
przyrodniczy I
przyrodniczy II
język angielski I
kompetencje językowe
język angielski II – poziom
podstawowy
język angielski II – poziom
zaawansowany
Liczba
uczniów
Maksymalna
Wynik
liczba punktów średni
Średni
procent
punktów
20 833
19 024
20 421
18 540
18 070
2 608
6 983
40
40
50
40
50
50
40
18.44
17.41
22.15
15.98
32.47
26.22
20.06
46.1%
43.5%
44.3%
40.0%
64.9%
52.4%
50.2%
11 400
40
20.21
50.5%
Wyników punktowych z I i II diagnozy nie możemy porównywać
– są to różne testy. Średnia trudność każdego testu jest inna.
Matematyka – rozkład średnich dla szkół
7.00%
Diagnoza z matematyki
6.00%
procent wyników
5.00%
4.00%
3.00%
2.00%
1.00%
0.00%
0
2
4
6
8
10 12 14 16 18 20 22 24 26 28 30 32 34 36 38 40
wynik surowy w punktach
diagnoza 1
diagnoza 2
Skala staninowa dla rozkładu
normalnego
Każdy przedział skali (oprócz brzegowych – pierwszy
i ostatni) teoretycznie zawiera 1 % wyników. Rozkład
wyników w skali centylowej jest prostokątny
Skala centylowa
• Miejsce wyniku ucznia w zbiorze
wszystkich wyników uczniów
z diagnozy
• Miejsce wyniku klasy w zbiorze
wszystkich wyników średnich klas
• Miejsce wyniku szkoły w zbiorze
wszystkich wyników szkół biorących
udział w projekcie.
Centyle są pozycjami osiągnięć uczniów, gdyż
wskazują miejsce uczniów (szkół, klas)
uzyskujących dany wynik w zbiorze wszystkich
wyników (populacji) uporządkowanych według
wyników testowania. Aby ustalić wartości
centyli porządkujemy wyniki od najniższych do
najwyższych, dzielimy na 100 równych części,
a następnie określamy położenie granic między
tymi częściami na skali wyników i oznaczamy je
jako centyle C1 , C2, ,C3 , C4 , .............C99 .
Skala centylowa dla wyników średnich szkół
(matematyka I)
III kwartyl
II kwartyl
- mediana
I kwartyl
Wyniki wyrażone w centylach pozwalają określić, jakie
miejsce wśród wszystkich szkół w projekcie ze względu
na wybraną diagnozę mają uczniowie naszej szkoły, czy
klasy.
Możemy korzystać ze wszystkich zaproponowanych
skal (miar), lub tylko z wybranej, z którą czujemy się
najbardziej komfortowo przy opisywaniu i analizie
rezultatów diagnozy.
Przedstawione wyniki nie informują natomiast, jakie
kompetencje kluczowe są opanowane a jakie nie.
Strefy wyników
Strefy zostały wybrane arbitralnie, ale są stosowane
w jednolity sposób w komunikowaniu wyników diagnoz
prowadzonych przez WSiP.
Strefa 1 – wyniki niskie są to wyniki odpowiadające
centylowi 25 i poniżej. W analizowanym przykładzie strefa
1 – wyniki niskie reprezentowane są przez słupki
zaznaczone czerwonym kolorem. Dla diagnozy
matematycznej możemy odczytać dla tej strefy przedział
średnich wyników dla szkół (od 0 do 16,68 punktu.
Strefa 2, wyników średnich (zaznaczona na wykresie
pomarańczowymi słupkami rozciąga się od 16,69 do 19,53
punktów.
Strefa wyników wysokich (zielone słupki na wykresie)
rozciąga się od 19,54 punktu do 40.
Wybór raportu do analizy
Wyniki dla
• szkoły,
• Klasy,
• ucznia
komunikowane są w podobny sposób.
Wyniki uczniów tej szkoły rozciągają się od 15 procent wyniku
maksymalnego do 79 procent.
Procent maksymalnej
liczby punktów
Skala staninowa i strefy normowane są dla każdej
diagnozy dla każdego testu osobno
Osobno
normowane są dla
uczniów,
średnich wyników
klas,
średnich wyników
szkół.
Przykładowe gimnazjum – dwie diagnozy
Przykładowe gimnazjum – dwie diagnozy (przedmioty mat-przyr.)
PLAN TESTU I KARTOTEKA
Materiały podzielone są na 3 części zgodnie
z podziałem wyników n 3 strefy
Matematyka – plan testu
PRZYKŁAD ZADANIA
SPRAWDZAJĄCEGO OPANOWANIE
KOMPETENCJI UCZENIA SIĘ
Zadanie 25 z diagnozy wstępnej - matematyka
Item 25 i25
Rit = 0,24
100
Perc entage
80
60
P = 0,19
40
20
0
1
2
Score Groups
Subgroup 0 -- Subtest 0
3
4
Zadanie 9 z diagnozy na koniec roku - matematyka
Item 34 z9
Rit = 0,44
100
Perc entage
80
60
P = 0,39
40
20
0
1
2
Score Groups
Subgroup 0 -- Subtest 0
3
4
Test diagnostyczny – matematyka (średnie
wyniki klas z podziałem na kompetencje)
Wskaźnik szkoła/ kraj wynik szkoły: wynik w kraju
Dla kompetencji uczenia się 1,79:1,43 = 1,252
MOJA KLASA
Wynik ogólny w wybranej do analizy klasie – test z nauk
przyrodniczych na zakończenie I klasy
Wyniki dla klasy – test matematyczny
Wyniki ogólne dla klasy
•skala staninowa,
•skala centylowa,
• strefy,
odniesione są do
wyników wszystkich
uczniów piszących
test matematyczny
(20 833 )
Wyniki dla klasy – test matematyczny
UCZEŃ
Raport ogólny dla ucznia
TEST
MATEMATYCZNY
Test przyrodniczy – raport dla ucznia
Raport ucznia – kompetencja uczenia się
Raport ucznia kompetencja 7 i 4
Podgląd odpowiedzi ucznia
DZIĘKUJĘ ZA UWAGĘ