Transcript Screeningsinstrument voor vakken

Onderwijskundige Dienst, Universiteit Twente, feb. 2014 / drs. W.D.J. Vlas
Screeningsinstrument toetsing op het niveau van een vak / onderwijseenheid
T.b.v.: examencommissies / toetsingscommissies / opleidingsmanagement
Dit instrument is bedoeld als (voorbeeld) leidraad bij het beoordelen van de kwaliteit van toetsen.
Essentieel zijn de in te vullen toelichtingen en actiepunten indien daar aanleiding toe is. In de bijlage
zijn een overzicht van benodigde documentatie en aanwijzingen voor de procesgang te vinden.
NB. De term “toetsen” of “toetsing” wordt gehanteerd voor alle mogelijke vormen van toetsing
(schriftelijk tentamen, mondeling tentamen, opdrachten, presentaties e.a.).
* wil zeggen: indien van toepassing
Onderwijseenheid / vak: ____________________________________________________________
Examinator(en):
____________________________________________________________
Datum screening:
____________________________________________________________
Betrokken bij screening: _ ___________________________________________________________
==================================================================================
Algemeen oordeel en (indien van toepassing) belangrijkste actie- en aandachtspunten om te
monitoren:
==================================================================================
1) Leerdoelen
1a) Zijn de leerdoelen correct geformuleerd (De student is in staat….), duidelijk, specifiek, meetbaar ?
[ ] ja [ ] nee [ ] leerdoelen ontbreken geheel of gedeeltelijk
Toelichting / vervolgactie:
1a)
1
1b) Sluiten de leerdoelen aan bij het te verwachten niveau in dit stadium van de opleiding?
[ ] ja [ ] nee [ ] is niet duidelijk
Toelichting / vervolgactie:
1b)
1c) Sluiten de leerdoelen aan bij het eindtermen van de opleiding?
[ ] ja [ ] nee [ ] onbekend / niet aangegeven
Toelichting / vervolgactie:
1c)
1d) Is rekening gehouden met de aansluiting bij gerelateerde voorgaande of navolgende vakken?
[ ] ja [ ] nee [ ] niet duidelijk [ ] niet van toepassing
Toelichting / vervolgactie:
1d)
==================================================================================
2) Toetsvormen versus leerdoelen
2a) Sluiten de toetsvormen aan bij de leerdoelen (bijv. aangetoond aan de hand van een
toetsschema)?
[ ] op orde [ ] relatie leerdoelen niet duidelijk [ ] twijfel over aansluiting
Toelichting / vervolgactie:
2a)
2b) Gaat het bij de toetsing om summatieve en/of formatieve (+ feedback) toetsing?
[ ] summatief [ ] formatief [ ] combinatie [ ] onduidelijk
Toelichting / vervolgactie:
2b)
2c) Bij meerdere toetsvormen:
> is de weging aangegeven?
[ ] ja [ ] nee
> zijn voorwaarden aangegeven (bijv. iedere opdracht moet voldoende zijn; cijfers
mogen onderling gecompenseerd) [ ] ja [ ] nee
Toelichting / vervolgactie:
2c)
2
* 2d) Formatieve toetsing: is duidelijk of en hoe feedback wordt gegeven? Gebeurt dit adequaat?
Duidelijk? [ ] ja [ ] nee Adequaat : [ ] ja [ ] nee
Toelichting / vervolgactie:
2d)
* 2e) Summatieve toetsing: wordt het cijfer toegelicht? Of is er gelegenheid voor toelichting op
cijfer? Toelichting is goed geregeld: [ ] ja [ ] nee
Toelichting / vervolgactie:
2e)
2f) Is er een herkansingsregeling? Is duidelijk hoe de herkansing is geregeld?
Regeling voorhanden? [ ] ja [ ] nee [ ] onbekend Regeling is duidelijk? [ ] ja [ ] nee
Toelichting / vervolgactie:
2f)
==================================================================================
3) Toetskwaliteit
3a) Is de kwaliteit van de gebruikte toets(en) goed? (O.a. helder geformuleerde toetsvragen,
duidelijke opdrachtbeschrijving.) Kwaliteit is: [ ] op orde
[ ] kan beter
Toelichting / vervolgactie / verbeterpunten:
3a)
3b) Sluit(en) de toets(en) qua niveau aan bij het niveau van de leerdoelen? (Bijv. als het bij een
leerdoel om toepassing van kennis gaat, beperkt de toets zich niet tot reproductie van kennis)
Aansluiting: [ ] goed
[ ] kan beter
Toelichting / vervolgactie / verbeterpunten:
3b)
* 3c) Indien van toepassing (bij schriftelijke tentamens): is er een toetsmatrijs voorhanden (matrix
met leerdoelen versus aantallen toetsvragen, niveau van de vragen en wegingsfactoren)
Voorhanden: [ ] ja [ ] nee
Kwaliteit: [ ] goed [ ] kan beter
Toelichting / vervolgactie /verbeterpunten:
3c)
3
4. Beoordeling
4a) Waren er bijzondere omstandigheden bij afname die van invloed zijn bij de beoordeling?
Bijzonderheden: [ ] nee [ ] ja, zie toelichting
* Indien ja: Is er adequaat gehandeld? [ ] ja [ ] nee
Toelichting / vervolgactie:
4a)
4b) Is duidelijk door wie er wordt beoordeeld? Wordt (worden) de examinator(en) voldoende
deskundig geacht?
[ ] duidelijk / deskundig
[ ] niet duidelijk
[ ] duidelijk / twijfel deskundigheid
Toelichting / vervolgactie:
4b)
* 4c) Indien van toepassing - bij meerdere beoordelaars: is er een beoordelingsprotocol? Geeft dit
voldoende duidelijkheid hoe er gewerkt dient te worden?
Voorhanden: [ ] ja [ ] nee Duidelijk: [ ] ja [ ] nee
Toelichting / vervolgactie / verbeterpunten:
4b)
4d) Is duidelijk op basis waarvan beoordeeld wordt (bijv. er is een antwoordmodel, observatiechecklist, rubric) ? Is het beoordelingsinstrumentarium beschikbaar? Is het instrumenten (of zijn de
instrumenten) van voldoende kwaliteit?
Duidelijk hoe: [ ] ja [ ] nee
Instrumentarium beschikbaar: [ ] ja [ ] nee
Toelichting / vervolgactie:
4d)
Instrument (1) : ______________________________________ Kwaliteit: [ ] okay [ ] verbeterpunten
4d-1)
Instrument (2): ______________________________________ Kwaliteit: [ ] okay [ ] verbeterpunten
4d-2)
Instrumentarium beschikbaar? [ ] nee [ ] ja
Instrument (3): ______________________________________ Kwaliteit: [ ] okay [ ] verbeterpunten
4d-3)
4
4e) Is duidelijk hoe het cijfer of de beoordeling (bijv. voldaan / niet voldaan) op basis van scores
wordt bepaald? Waar bij scores de cesuur ligt? Gebeurt dit op goede wijze?
Duidelijk: [ ] ja [ ] nee
Op orde: [ ] ja [ ] nee
Toelichting / vervolgactie / verbeterpunten:
4d)
* 4f) Indien de excie zelf (steeksproefgewijs of o.b.v. gerichte keuzes zoals lage/hoge cijfers)
producten bekijkt of tentamens nakijkt: kwam het oordeel (cijfer, feedback) overeen met het oordeel
van de examinator? [ ] ja [ ] nee
Toelichting / vervolgactie:
4f)
==================================================================================
5) Transparantie
5a) Zijn de studenten voldoende geïnformeerd over leerdoelen, toetsvormen en beoordelingswijze
(inclusief bijv. voorbeelden van toetsvragen)? Gebeurde dit op adequate wijze (af te leiden op basis
van bijv. documentatie, toelichting examinator en/of oordelen uit studentevaluaties)?
Informatievoorziening was: [ ] adequaat
[ ] niet adequaat
* Oordeel studenten(evaluatie): ______________________________________________________
Toelichting / vervolgactie:
5a)
==================================================================================
6) Resultaten studentenevaluatie
6a) Zijn er evaluatieresultaten voorhanden (aangeleverd)? Geven deze aanleiding voor zorg of actie?
[ ] niet voorhanden [ ] voorhanden / geen actie
[ ] voorhanden / actie
Toelichting / vervolgactie:
6a)
==================================================================================
5
7) Resultaten toetsanalyse / rendementen
7a) Is er een toetsanalyse uitgevoerd (aangeleverd)? Geven de resultaten aanleiding voor zorg of
actie?
[ ] niet voorhanden [ ] voorhanden / geen actie
[ ] voorhanden / actie
Toelichting / vervolgactie:
7a)
==================================================================================
8) Persoonlijke reflectie en vervolgacties examinator / bijzonderheden
8a) Is er een reflectie van de examinator voorhanden? Adequaat? Vervolgacties nodig?
[ ] niet voorhanden [ ] voorhanden / geen actie [ ] voorhanden / vervolgactie nodig
Toelichting / vervolgactie:
8a)
6
Bijlage 1)
Checklist documentatie
Checklist voor relevante documentatie ten behoeve van screening. De gewenste documentatie kan
verzameld of aangeleverd zijn via verschillende wegen (via de examinator, via een ondersteunend
bureau voor onderwijszaken e.a.). Niet alle genoemde documenten hoeven van toepassing te zijn.
Wen- Documentatie
selijk
Voorhanden
Evt. toelichting. Bijzonderheden
Vakbeschrijving en leerdoelen
Gebruikte / te gebruiken opdracht(en)
Afgenomen / af te nemen tentamen
Toetsmatrijs (tentamen)
Toetsschema (beschrijving leerdoelen
versus toetsvormen + weging)
Beoordelingsprotocol
Antwoordmodel bij tentamen
Beoordelingsinstrument(en) bij
opdrachten / presentaties / criteria
Studentenevaluatieresultaten m.b.t.
toetsaspecten
Voorbeelden / steekproef van
beoordeelde tentamens
Voorbeelden / steekproef van
producten / presentaties (video) e.d.
Toetsanalyseresultaten *
Rendementgegevens (aantal
deelnemers vak/toets; aantal
geslaagden e.d.)
Reflectie/actiepunten examinator
Extra gevraagd of aangeleverd: …
* O.b.v. format / richtlijnen.
Toe te voegen aan dossier na afloop van screening (indien van toepassing)
Documentatie
Gespreksverslag examinator + excie
Verslag en actiepunten n.a.v. de screening
Overige relevante documentatie:
VoorEvt. toelichting. Bijzonderheden
handen
Toe te voegen na monitoring / na uitvoer actiepunten. Datum: ____________________________
Documentatie
Oordeel o.b.v. monitoring uitvoering
actiepunten
Resterende of nieuwe actiepunten: …
VoorEvt. toelichting. Bijzonderheden
handen
Overige relevante documentatie: …
7