Transcript 10-09-22 Seminar za ŠPT_Evalvacija ŠRP
Projekt POSODOBITEV GIMNAZIJSKIH PROGRAMOV
NA
Č
TOVANJE ŠRP S POUDARKOM NA SPREMLJAVI IN EVALVACIJI
Seminar za ŠPT, Ljubljana, 22/9 - 2010 Katja Pavli č Škerjanc, [email protected]
Operacijo delno financira Evropska unija iz Evropskega socialnega sklada ter Ministrstvo za šolstvo in šport. Operacija se izvaja v okviru Operativnega programa razvoja človeških virov v obdobju 2007-2013, razvojne prioritete: Razvoj človeških virov in vseživljenjsko učenje; prednostne usmeritve: Izboljšanje kakovosti in učinkovitosti sistemov izobraževanja in usposabljanja.
Cilj in pri
č
akovani rezultat(i)
•
Senzibilizacija za Delavnico 2:
• Obnovitev ključnih pojmov in korakov načrtovanja ter spremljave in evalvacije • Poglobljeni razmislek o kakovosti, kriterijih in merilih ter metodologiji in inštrumentariju spremljave in elvalvacije (zbiranje podatkov in njihovo ovrednotenje)
NA
Č
RTOVANJE RAZVOJNEGA PROJEKTA KLJU
Č
NI POJMI:
• razvoj •
(akcijsko) raziskovanje
• projekt • cilj(i) projekta • pričakovani rezultati • dejavnosti (za doseganje • cilja oz. rezultatov) •
kazalci (/-niki) kakovosti
• kriteriji in merila • spremljava • evalvacija • diseminacija
FAZE /DEJAVNOSTI RAZVOJNEGA PROJEKTA
1. NA
Č
RTOVANJE 2. Izvajanje 3. Spremljanje 4. Evalviranje 5. Diseminacija
NA
Č
RT RAZVOJNEGA PROJEKTA (izvajanja, spremljanja in evalviranja)
• •
1. Cilji
2.
Pričakovani
Kazalniki rezultati
kakovosti
rezultatov
(kvantitativni in kvalitativni) • Kriteriji in merila za ocenjevanje kakovosti
3. Dejavnosti
za doseganje ciljev
Kazalniki procesov
kakovosti (kvantitativni in kvalitativni) • Kriteriji in merila za ocenjevanja kakovosti
4. Nujni pogoji 5. Omejitve in tveganja
• Načini odpravljanja omejitev in zmanjševanja tveganj
6. SPREMLJAVA in 7. EVALVACIJA 8. DISEMINACIJA
Iz prijave ŠRP … 2.4
Izvedbeni načrt - Rokovnik aktivnosti Končni izdelek (/-lki) Aktivnosti Nosilec Izvajalci Rok Ali naš izvedbeni načrt med aktivnostmi vključuje tudi že tiste, ki so sestavina spremljanja in evalviranja?
ŠRP
Akcijsko raziskovanje
• Smiseln
cilj
Refleksija - evalvacija • Dosegljiv • Izvedljiva
rezultat
“
logistika
” Opazovanje - spremljanje • Racionalna
delitev dela
(kaj skupaj, kaj posamično / ločeno; kaj pred, kaj med, kaj po …?) • “Dober”
načrt
izvedbe (dejavnosti, ki podpirajo cilje in pričakovane rezultate; časovni potek projekta …) Izvajanje Načrtovanje
SPREMLJANJE IN (SAMO)EVALVACIJA IZVAJANJA PROJEKTA
METODE RAZISKOVANJA
(
pedagoško raziskovanje: kvantitativno empirično neeksperimentalno raziskovanje
)
Deskriptivna
in
eksplikativna
metoda •
DESKRIPTIVNA
: na ravni kakovosti in količine (
kakšni
•
kolikšni
so pedagoški pojavi, ki jih raziskujemo)
EKSPLIKATIVNA:
vzročno pojasnjuje pedagoške in pojave, ki jih raziskujemo Vsaka eksplikativna metoda se začne z deskripcijo; ni deskriptivne metode brez vsaj nekaj ugotavljanja vzročnih zvez (interpretacija podatkov).
Glej: dr. Majda Cencič,
KAKO POTEKA PEDAGOŠKO RAZISKOVANJE Primer kvantitativne empirične neeksperimentalne raziskave
Zavod RS za šolstvo, Ljubljana, 2009
Spirala akcijskega raziskovanja
ŠRP
Akcijsko raziskovanje
• “Dober”
načrt spremljave
• “Dobra”
evalvacija
• “Dobra”
diseminacija
ŠOLSKI RAZVOJNI PROJEKTI
Z razvojnim projektom šola
• na na č rten in sistemati č en na č in • spreminja
(= izboljšuje )
• svojo PRAKSO , • da bi spremenila
izboljšala ) (=
• u č ne rezultate dijakov .
(Kako vem-o),
kaj je DOBRO ?
Ugotavljanje
(sredstvo) in
zagotavljanje
(cilj)
KAKOVOSTI
Terminološki pomo č nik dr. Valentin Bucik
• • •
Uvajanje posodobitve/novosti …
je postopek sistematične in načrtne priprave pogojev za njeno optimalno izvajanje.
Spremljanje …
je postopek sistematičnega zbiranja informacij o uresničevanju uvedbe posodobitve/novosti … z namenom, da sprotno in neposredno v pedagoški praksi rešujemo težave, povezane z uvajanjem novosti.
Evalvacija ...
je postopek, ki na osnovi zbranih podatkov: – presoja o kakovosti posodobitev/novosti …, – ovrednoti, kolikšne in kakšne spremembe nastajajo z njenim/njihovim uvajanjem, – omogoči oblikovanje presoje o tem, kako izboljšati način njihovega izvajanja.
MINUTA ZA RAZMISLEK
•
Ali smo se pri opredeljevanju pričakovanih rezultatov ŠRP (dovolj) jasno in argumentirano pogovorili o pričakovani (novi) kakovosti? Smo jo artikulirali v načrtu projekta?
• Smo torej opredelili, kaj je za nas “izboljšanje”?
• Če so to “
boljši učni dosežki dijakov
…”, kateri konkretno? Kako jih bomo ugotavljali in merili? Jih pričakujemo od vseh dijakov, večine ali bo dovolj že manjše število? S čim utemeljujemo svoje izbire/odločitve?
• Če je to “
boljša organizacija učnega procesa …
”
cilji razvojnega projekta dejavnosti u
č
iteljev
►
procesi
kakovost PROCESOV?
kazalniki -
kriteriji
- merila
rezultati razvojnega projekta
►
produkti
Kako dober je naš kon č ni izdelek?
Kako dobro delamo oz. smo delali?
kakovost PRODUKTOV?
kazalniki -
kriteriji
- merila
• KAJ so dobri
KLJU
Č
NA VPRAŠANJA
procesi?
• KAJ so dobri produkti?
• Če je eden od procesov, ključnih za uspeh projekta, ki ga bomo
spremljali
(tj.
opazovali in o njem sistematično zbirali podatke
) ter
evalvirali
(tj.
zbrane podatke analizirali in ovrednotili
) npr. TIMSKO POUČEVANJE, produkt pa npr. FLEKSIBILNI URNIK, kateri kriteriji nas bodo pri tem vodili kaj je dobro timsko poučevanje, kaj je dober fleksibilen urnik)?
KLJU
Č
NA VPRAŠANJA
• Dobro ZA KOGA?
• ŠRP so “javni” projekti, tj. potekajo znotraj konzorcija strokovnih gimnazij in imajo poleg šolskih še druge déležnike (t.i.
stakeholders
) • Kdo nas torej vse “omejuje”, komu torej moramo odgovoriti, koga vse zadovoljiti pri določanju kakovosti oz. opredeljevanju, kaj je dobro (kdo so naši notranji in zunanji déležniki )?
MINUTA ZA RAZMISLEK
•
Koga vse zadevajo rezultati našega ŠRP, koga aktivnosti, s katerimi bomo do njih prišli?
Kaj bomo upoštevali pri raziskovanju oz. ugotavljali v spremljavi in evalvaciji?
• Zadovoljstvo učiteljev, ki novost izvajajo • Sprejetost novosti pri kolegih (kolegialna evalvacija) • Sprejemljivost novosti za druge (širšo strokovno javnost) • Pozitiven učinek na učne dosežke in zadovoljstvo dijakov • Skladnost z zahtevami naročnika • Skladnost s teoretičnimi dognanji
Kaj še? Kaj zlasti mi v našem ŠRP?
SPREMLJAVA IN EVALVACIJA ŠRP CILJNE SKUPINE Ekspertna skupina konzorcija ŠOLE Konzulent ŠRP Vodja PT ŠRP Strokovna in administrativna podpora projektu Šolski PROJEKTNI TIM UČITELJI Drugi člani PT DIJAKI RAVNATELJI dijaki, ki sodelujejo v projektu dijaki, ki NE sodelujejo v projektu drugi učitelji, ki sodelujejo v projektu učitelji, ki NE sodelujejo v projektu
MINUTA ZA RAZMISLEK
• •
Kdo so torej ciljne skupine, ki bodo aktivno vključene v spremljavo in evalvacijo našega ŠRP?
Kako so povezane s “procesi in produkti” projekta?
• Če je npr. pričakovani oz. načrtovani rezultat našega ŠRP “
povečanje obsega (kakovostnega) timskega poučevanja
”, ker pričakujemo, da bomo na ta način “z interdisciplinarnim pristopom ” zvečali “avtentičnost učnega procesa in, posledično, tako motivacijo (interes) kot učne rezultate dijakov” (bolj povezano znanje, kompleksnejši učni dosežki”, koga vse bomo upoštevali pri izdelavi načrta spremljave in evalvacije in kako?
MINUTA ZA RAZMISLEK
•
Kdo so torej ciljne skupine, ki bodo aktivno vključene v spremljavo in evalvacijo našega ŠRP?
MINUTA ZA RAZMISLEK
•
Katere vrste evalvacije bomo predvideli (načrtovali) in izvedli?
SPREMLJAVA IN EVALVACIJA ŠRP
samoevalvacijska poročila šol
VRSTE EVALVACIJE NOTRANJA EVALVACIJA SAMOEVALVACIJA KOLEGIALNA EVALVACIJA
evalvacija pedagoških
ravnanj
(opazovanja)
ZUNANJA EVALVACIJA
vprašalniki (in intervjuji?) Ekspertne skupine KSG?
evalvacija učnih
gradiv
(racionalna in empirična)
MINUTA ZA RAZMISLEK
•
Katere metode evalvacije (tj. zbiranja podatkov) bomo predvideli (načrtovali) in uporabili?
SPREMLJAVA IN EVALVACIJA ŠRP
vse ciljne skupine na šoli?
METODE EVALVACIJE anketiranje
(vprašalniki)
intervju opazovanje fokusne skupine
vodje ŠRP? vodje ŠRT?
ravnatelji? … interna evalvacija?
merjenje učinkov
(npr. učnih rezultatov) testi znanja?
SPREMLJAVA IN EVALVACIJA ŠRP Vrste raziskovalnih tehnik OPAZOVANJE NEPOSREDNO/ POSREDNO INDIVIDUALNO/ SKUPINSKO ANKETA PISNA/ USTNA JAVNA/ ANONIMNA ENKRATNA/ VEČKRATNA INTERVJU ANALIZA DOKUMENTACIJE PRIMARNI DOKUMENTI SEKUNDARNI DOKUMENTI
SPREMLJAVA IN EVALVACIJA ŠRP Instrumenti raziskovanja OPAZOVANJE Protokol Ocenjevalne lestvice Zapisnik
Drugo
ANKETA Anketni vprašalnik INTERVJU Seznam vprašanj Zapisnik Posnetek ANALIZA DOKUMENTACIJE Strokovna literatura, študije Projektna dokumentacija Izobraževalna dokumentacija
Drugo
MINUTA ZA RAZMISLEK
Aktivnost/Izdelek:
priprava na timski pouk
Kriteriji (in merila) kakovosti: Zbiranje podatkov (kaj in kako): Opombe:
Skupna predloga za pripravo na TP?
K(d)aj?
• Z zakonom določena delovna obveznost učitelja (ZOFVI, 119. člen: Priprava na pouk obsega: - sprotno vsebinsko in metodično pripravo, - pripravo didaktičnih pripomočkov.)
V kakšni obliki?
• • Šolska obveznost
Vpeljava novosti
Timski pouk
• Šolska predloga • Skupna predloga ►
Skupni okvir
1.
2.
3.
Določitev ciljev ITP Oblikovanje poučevalnih timov Določitev izvedbenih okvirov
(čas, prostor)
Predpriprava na ITP Predloga oz. obrazec za pripravo na pouk?
Popravljena priprava na ITP Priprava na ITP Refleksija in/oz. evalvacija izvedbe ITP IZVEDBA ITP Spremljanje izvajanja? Kaj? Kdo? Kako?
Priprava na ITP: (Nujni?) elementi 1.
2.
3.
Splošni podatki:
Ciljna skupina dijakov (letnik, oddelek, starost), Predmet(a) Učitelja Datum, šolska ura, prostor (kateri, posebne zahteve – ureditev učilnice) Učni pripomočki (za učitelja, za dijake)
Žarišče/Fokus ure oz. učnega sklopa Tip ure/Učni pristop, metoda, oblika 4. Vrsta ITP
5. Potrebno predznanje
6.
Učni cilji in/oz. pričakovani učni dosežki 7.
Potek ure in/oz. dejavnosti učiteljev in dijakov 8.
Ugotavljanje učnih dosežkov
(preverjanje, ocenjevanje …
9. Logistika
: Kdo bo poskrbel za ureditev učilnice, kdo za fotokopije, kdo bo odklenil učilnico, kdo s dogovoril z vzdrževalcem naprav/knjižničarko za …?
Čas 5’ 5’ 15’ Iz priprave na ITP … 1. učitelj Preveri prisotnost Vpiše v dnevnik… - Pojasni cilje, pričakovane učne dosežke in potek ure … 2. učitelj Dijaki
…
- Da navodila za oblikovanje skupin …
…
Skupine U1 Skupine U2 15’
… …
5 ’ - Da navodila za DN …
VZVRATNO NA Č RTOVANJE
• Opredeliti pričakovane dosežke • Določiti načine za ugotavljanje dosežkov • Načrtovati proces učenja in poučevanja
KAKO SE PRIPRAVLJAMO NA POUK vzvratno načrtovanje (backward planning) Najprej si postavimo tri ključna vprašanja: 1. Kam želim, da prispejo moji učenci?
učni cilji ► pričakovani učni izidi - standardi znanja
(expected learning outcomes)
2. Kako bom vedel, ali so prišli na cilj oz. do kam so prišli na poti do cilja?
vrednotenje “znanja” standardi znanja ► kriteriji, opisniki 3. Kako bodo (= bomo skupaj) prispeli tja?
učni proces = dejavnosti dijaka + dejavnosti učitelja (ob uporabi različnih učnih orodij)
Aktivnosti in (u č ne) dejavnosti in izvedba: pred/med/po?
Pred izvedbo UČ 1 UČ 2 Dijaki Med izvedbo UČ 1 UČ 2 Dijaki Po izvedbi UČ 1 UČ 2 Dijaki
?
?
DN Čas?
predznanje predpriprava
Čas?
?
?
DN Čas?
učne dejavnosti po zaključku – navezava na … …
DELAVNICA 2
Aktivnost/Izdelek:
?
Kriteriji (in merila) kakovosti: Zbiranje podatkov (kaj in kako): Opombe: