HOORCOLLEGE 8
Evalueren
DOELEN
Jelina - 4HuWe - heeft het niet makkelijk met spelling Nederlands. Door voor haar bijkomende instructie, begeleiding en oefening te voorzien, doet ze het bij toetsen op het eind van het semester veel beter.
ter overweging
Doelstellingen
Beginsituatie
Leeromgeving
Evaluatie
(Van Gelder, 1973)
bepalen van de waarde van het onderwijsleerproces en van het resultaat daarvan
situering
Leeromgeving
Juist, valide en betrouwbaar instrument om te meten of doelen bereikt worden
Wanneer is het goed (genoeg)?
Beslissing (sanctionerende of didactisch)
Terugkoppeling aan betrokkenen in overeenstemming met het doel van de evaluatie
Meten en registreren
Beoordelen
Beslissen
Rapporteren
vier fasen
waarom
wat
wie
wanneer
waarmee
hoe
vele keuzes
waarom
Evaluatie van leren
Evaluatie om te leren
'Test'
< 'testum': instrument
> meting, objectieve vaststelling
Summatieve evaluatie
'Assessment'
< 'assidere': naast iemand zitten
> begeleiding, groeipotentieel, gericht op leerproces
Formatieve evaluatie
wat
Product
Proces
Het resultaat van het leerproces
Het verloop van het leerproces
wie
Traditioneel
Bij evalueren om te leren
de leerkracht
wanneer
bij de start tussentijds bij het eind
product proces product proces product
Het tijdstip van evaluatie bepaalt niet noodzakelijk of evaluatie formatief of summatief is !
hoe
! voor summatieve evaluatie
hoe
! voor summatieve evaluatie
validiteit
Meet je wat je wil/ moet meten? Zorgvuldig toetsvorm en -inhoud kiezen
Wordt er correct gemeten? Of berust het resultaat op toeval?
hoe
! voor summatieve evaluatie
Betrouwbaarheid
Afweging: best mogelijke validiteit en betrouwbaarheid i.f.v. tijd & beschikbare middelen
(de meest valide toetsvorm kan zeer onbetrouwbaar worden als de omstandigheden (bijv. aantal leerlingen) niet toelaten om hem goed uit te voeren)
hoe
! voor summatieve evaluatie
Efficiëntie
Objectiviteit
> verbetersleutels, scorewijzers, kijkwijzers
Transparantie
> duidelijkheid over doelen, criteria, normen, voorbeeldvragen, oefentoets, ...
Normering
> vooraf bepaalde criteria
hoe
! voor summatieve evaluatie
Billijkheid
Data verzamelen en interpreteren
!Congruent!
WYTIWYG
What you test is what you get
hoe
! voor summatieve evaluatie
Uit het leven gegrepen
Hoe zou je hiermee omgaan, rekening houdend met de kwaliteitscriteria?
hoe
! voor summatieve evaluatie
Welke toetsvormen ken je?
Zorg dat je toetsvorm congruent is met het gedrag dat in de doelen beoogd werd
waarmee
tal van opties
Toets met gesloten vragen
Toets met open vragen
Hands-on toets
Simulatietoets
Casus
Logboek
Portfolio
wanneer zou ik een ... gebruiken?
Beraad je in een groep van 4 over twee toetsvormen:
Bespreek en noteer (8')
Verifieer met de cursus (2')
Licht vervolgens plenair toe
toets met gesloten vragen
+
-
toets met open vragen
+
-
Hands-on toets
+
-
Simulatietoets
+
-
Hands-off toets: casus
+
-
Logboek
+
-
Selectie van 'producten', 'artefacten' aan de hand waarvan men zijn competenties zichtbaar maakt, eventueel aangevuld met bijschriften/reflecties bij die producten, zelfevaluatie, persoonlijk ontwikkelingsplan
Portfolio
+
-
Lees en leid uit het voorbeeld principes af waarvan je kan gebruik maken om evalueren om te leren in je lessen in te bouwen.
Canvas-cursus Krachtige Leeromgeving
> Startpagina
> Lesmateriaal per campus
> Campus Etterbeek
> Les vandaag: voorbeeld
Oriënteren
Voorbereiden
Uitvoeren
Reflecteren
evalueren om te leren: voorbeeld
evalueren om te leren: principes
= alle informatie die een leerling krijgt over diens leerproces
< leerkracht, medeleerlingen, ouders, leerling zelf, online tests...
Bij de hoogste invloeden op leerprestaties, indien goed toegepast
Effect size: .73
(Hattie & Timperley, 2007)
feedback
Beschrijf aan welke criteria de prestatie/het proces moet beantwoorden
Vergelijk met de geleverde prestatie/proces
Stramien voor feedback geven
1. Taakniveau
Juist of onjuist
'Je beschrijft heel helder waarom de grondstoffen gebruikt worden voor deze technische realisatie. Wat ik mis is een analyse van de risico's bij gebruik van deze grondstoffen.'
3. Zelfregulatie
'Ik merk op dat je stopt met werken telkens als je een hulpvraag hebt. Misschien kan je je vraag opschrijven en toch doorwerken aan andere dingen tot ik je kan verder op weg helpen.'
2. Procesniveau
Gebruikte strategie
'Je hebt enkele internet-bronnen met de juiste informatie gevonden. Het is nodig die grondiger te bestuderen en verbanden te leggen tussen de elementen van informatie.'
4. Persoonlijk functioneren
'Ik vind het fantastisch dat je met al die creatieve ideeën komt.'
(Hattie & Timperley, 2007)
vier feedbackniveaus
Feedback = informatie over het leerproces (na de uitvoering)
Hoe doe ik het als leerling?
Feed-up = informatie over de leerdoelen (tijdens de uitvoering)
Wat wil/moet ik als leerling bereiken? Waar werk ik naartoe? Wat wil ik bereiken?
Feedforward = informatie over vervolgstappen (vòòr de volgende stap / leertaak)
Wat volgt? Wat is de volgende stap?
Drie vormen van feedback
Rubrics kunnen prima worden ingezet voor feed up, feedback, en feed forward en voor gebruik door de leerkracht, de leerling zelf en medeleerlingen
avi77 principes voor feedback
Goede feedback:
(Nicol & Macfarlane-Dick, 2006)
Kwaliteit van feedback
Voorbeeld rubricsschaal product
Onvoldoende
Uitstekend
Voorbeeld rubricsschaal proces
Onvoldoende
Uitstekend
Voor attitudes en vaardigheden
https://fdocuments.nl/reader/full/sam-schaal-schaal-voor-meting-van-attitudes-en-schaal-voor-meting-van-attitudes
Voor wiskunde
https://users.ugent.be/~mvalcke/LI_1213/cursus/rubrics_vb.pdf
Voor wetenschappen
histoforum.net/webquests/Rubrics_of_Rubrieken.doc
Voorbeelden rubrics
Formatieve toetsing en feedback
(Mitchell, 2015)
15
Jelina - 4HuWe - heeft het niet makkelijk met spelling Nederlands. Door voor haar bijkomende instructie, begeleiding en oefening te voorzien, doet ze het bij toetsen op het eind van het semester veel beter.
ter overweging
Brooks, C., Burton, R., van der Kleij, F., Carroll, A., Olave, K., Hattie, J., (2021). From fixing the work to improving the learner: An initial evaluation of a professional learning intervention using a new student-centered feedback model. Studies in Educational Evaluation 68.100943 (2021).
Hattie J., & Timperley H. (2007). The Power of Feedback. Review of Educational Research 77(1), 81–112.
Mitchell, D. (2014). What really works in Special and Inclusive Education. Using Evidence-Based Teaching –Second Edition. New York: Routledge
Nicol, D., and Macfarlane-Dick, D. (2006). Formative assessment and self-regulated learning: A model and seven principles of good feedback practice. Studies in Higher Education,31 (2), 199–218.
wwww.pixabay.com
Referenties
70%
30%
Evaluatie van KLO