Beoordelen in het mbo 2

• pedagogiek
• HBO
• Studiejaar 1

Beoordelen in het mbo

Bijeenkomst 2

 Susan Coevert

Programma

Terugblik vorige les

Lesdoelen 

Formatief beoordelen

Oer

Opdracht

Theorie: Toetsbeleid

Theorie: Constructive alignment.

Werkvorm: Analyse meegenomen toets d.m.v. constructive alignment.

Theorie: Taxonomie Bloom, Miller.

Werkvorm: Analyse meegenomen toets d.m.v. taxonomieën

Breakoutrooms -> artikel bespreken

Toetsen in het mbo

Soorten toetsen

Groepjes indelen

Lesdoelen

• Je kunt een toets selecteren om te gebruiken voor werkvormen op basis van argumenten.
  
• Je kan bepalen of er sprake is van constuctive alignement tussen de lesmethode, doelen en de toetsing.
  
• Je kan toetsen analyseren met behulp van het competentieprofiel van Miller
  
• Je kan leerdoelen en toetsvragen analyseren met behulp van de taxonomie van Bloom.
  

Summatieve toetsen zijn

1. Zijn toetsen waarvan de uitslag op het diploma komt
2. Zijn voortgangstoetsen
3. examens

Waarom wordt je door toetsen slimmer?

1. Door toetsen leer je snel informatie uit je geheugen op te roepen
2. Door te leren voor toetsen onthoud je de leerstof beter
3. Door te toetsen weet je wat je goed kan en waar je nog aan kan werken

Toetscyclus

http://toetsing.uva.nl/toetscyclus/toetscyclus.html

Diagnostische toetsen

Het doel van een diagnostische toets is:

• Het vaststellen van een, eventueel te wijzigen, leerprogramma.
  
• Feedback op leerproces
  
• Stand van zaken; waar staan de leerlingen 
• Geen onderdeel van eindbeoordeling

Soorten toetsen

• Schriftelijke toetsen: Meerkeuze vragen, open vragen, juist/onjuistvragen, verslagen, werkstukken, observaties en casustoetsen. 
• Mondelinge toetsen: vraaggesprekken, casustoetsen, reflectiegesprekken en presentaties
• Simulatie toetsen: rollenspel, oefensimulaties en praktijktoetsen
  

Visie op toetsen

Formatief toesten

Feedback is essentieel in formatief toetsen en het ontwikkelen van zelfregulerend leren bij leerlingen (Clark, 2012).

Belangrijkste kenmerken van formatief toetsen om zelfregulatie te bevorderen zijn het gezamenlijk reflecteren op bewijs van leren om zo metacognitieve vaardigheden als planning,

monitoring, evaluatie en reflectie te versterken (Sluijsmans, et al. 2013)

Feedbackfunctie van de toets

John Hattie

Visible learning for teachers​

​

Van te voren zelf je cijfer bedenken​ 

Formatieve toetsing​

Feedback belangrijk​

​

beoordelen toets

Feedback geven

FEEDBACK REGELS VOLGENS HATTIE​

Feedback model van Hattie & Timperly, 2007, p. 87 geraadpleegd op 9 oktober 2017, van:​ 

http://histoforum.net/2013/feedback.htmlst

OER

OER

Heb je het OER kunnen vinden?

Bekeken? 

Summatieve en formatieve toetsen in het OER?

Eindopdracht

Eindopdracht deel A: Je analyseert het toetsbeleid

Eindopdracht deel B: Je selecteert een toets uit de praktijk waarbij verbetering wenselijk is en je onderbouwt je keuze voor de betreffende toets.

Opdracht A

Je analyseert het toetsbeleid:

• Vanuit meerdere invalshoeken het toetsbeleid onderzoeken.
  
• Toetsbeleid van de organisatie is inzichtelijk:
•                   Examen organisatie
•                   Onderwijsvisie op toetsen
•                    Formatieve toetsing
•                    Onderwijs en examen regeling

Opdracht A

• Het toetsbeleid wordt zowel beschreven door gebruik te maken van documenten als interviews met betrokkenen.  
• Uit de beschrijving van het toetsbeleid worden de volgende overtuigend onderwerpen beschreven: Examen organisatie, Onderwijsvisie op toetsen, Formatieve toetsing,  Onderwijs en examen regeling. De beschrijving wordt expliciet ondersteund met theorie (dmv. van een APA-referentie). Hieruit blijkt een kritische blik.

Wat weet je over het toetsbeleid van jouw ROC?

Toetsbeleid

Hoe ziet de organisatie rondom het examineren eruit?

Wat zijn de richtlijnen voor de summatieve en formatieve toetsen?

Is er een toetsconstructeur in het team?

Heeft het team een formatief toetsbeleid?

Toetsbeleid

Bekijk de opbouw van kwaliteitspiramide voor toetsen op: http://www.open.ou.nl/dbr/uitlegpiramide.html

Onderzoek opdracht A

Hoe ziet de organisatie rondom het examineren eruit?

Wat zijn de richtlijnen voor de summatieve en formatieve toetsen?

Is er een toetsconstructeur in het team?

Heeft het team een formatief toetsbeleid?

Kan je daar iets van vinden op intranet?

Constructive aligment

Constructive Alignment

Opdracht B

• Je selecteert een toets uit de praktijk waarbij verbetering wenselijk is en je onderbouwt je keuze voor de betreffende toets
• De keuze van de toets uit de verzameling toetsen van de intervisiegroep wordt onderbouwd door middel van:
  

• Betrouwbaarheid

• Laag slagingspercentage.

• Niet in lijn met toetsbeleid.

• Lage validiteit.

• Negatieve feedback van studenten.

• Te eenzijdige toetsvragen

Opdracht B

De keuze wordt onderbouwd door de keuze van de toets op minimaal vier van de criteria correct te baseren. Hierbij wordt naar literatuur verwezen en/of naar concrete feedback van studenten.

Aan de slag - 20 min

In groepjes aan het werk

Bekijk elkaars toetsen en selecteer er één.

Ga in je groepje de toets die je hebt geselecteerd beoordelen op constructive aligment

Doel: analyseren mate van constructive alignement van toetsen.

Toets analyse 

1. Bepaal, voor zover mogelijk, in hoeverre er sprake is van constructive alignement bij de meegenomen toetsen.

2. Kies gezamenlijk in ieder geval 1 toets die het meest leerzaam is om te analyseren op dit gebied. Geef expliciet aan waarom deze het meeste interessant is om te analyseren.

3. Ga in ieder geval in op de relaties 1 en 2. zie schema.

4. Bedenk een mogelijke verbeteractie. Probeer de keuze te beargumenteren.

Taxonomieën

Voordeel

- Nadenken over wat er met de kennis gedaan moet worden

- Geeft structuur aan de toets, maakt toetsen afwisselend

- Hulp validiteit.

Nadeel

- Vaak geen onderliggend bewijs/redenering, niet altijd helemaal wetenschappelijk waterdicht.

- Subjectieve indeling, overlap.

- Noodzakelijke volgorde: onthouden, begrijpen, toepassen.

Bron: https://score.hva.nl/Bronnen/Overzicht%20taxonomieën.pdf

Link op mijn hva.nl -> Taxonomieën zijn hot en handig

Taxonomieën

Taxonomie van Miller

https://tauu.uu.nl/wp-content/uploads/2015/03/Handout-1a-Wanneer-kiezen-voor-Multiple-Choice.pdf

Miller

Indeling van toetsen volgens de competentiedriehoek van Miller

Knows:                    Kennistoets:

                                    open en gesloten vragen, antwoordmodel.

Knows how:           Casustoets, vaardigheidstoets,

                                     antwoordmodel, gedragscriteria.

Shows how:           Casustoets, simulaties, project, BPV-opdracht

                                    rubrics, gedragscriteria.

Does:                        Praktijkexamens, afstudeeronderzoek

                                    rubrics, gedragscriteria, CGI Triangulatie essentieel

Taxonomie van Bloom

Van der Kamp (2016)

http://www.expertisecentrum-kunsttheorie.nl/cms_data/bloom.pdf

analyseren onderliggende taxonomieën toets 

20 min

Kies gezamenlijk in ieder geval 1 toets die het meest leerzaam is om te analyseren op dit gebied. Geef expliciet aan waarom deze het meeste interessant is om te analyseren.

Miller.           Op welke niveaus van Miller heeft de toets b etrekking?.

Bloom.         Bepaal op welk(e) niveau(s) de doelen zijn geformuleerd. Eerst hoge vs. lage orde,                                dan specifiek een niveau.

                        Bepaal op welk(e) niveau (s) de vragen zijn geformuleerd. Eerst hoge vs. lage orde,                              dan specifiek een niveau.

Bedenk een mogelijke verbeteractie nav. de inzichten die je hebt opgedaan.

Terugkoppelen

Wat is jullie opgevallen?

Lesdoelen

Je kunt een toets selecteren om te gebruiken voor werkvormen op basis van argumenten.

Je kan bepalen of er sprake is van constuctive alignment tussen de lesmethode, doelen en de toetsing.

Je kan toetsen analyseren met behulp van het competentieprofiel van Miller

Je kan leerdoelen en toetsvragen analyseren met behulp van de taxonomie van Bloom.

Volgende keer

Toetsmatrijs

Toetsproces

Stappen:

1. Ontwerpen
(welke leerdoelen ga je toetsen)

2. Construeren toetsmatrijs

3. Construeren toets

4. Afnemen

5. Nakijken en beoordelen

6. Analyseren en

7. Evalueren en verbeteren

Bron: toetscyclus van Milius 2007

soorten toetsen

Formatieve toetsen -> voortgangstoetsen, feedback belangrijk voor leerproces

Summatieve toetsen -> eind toetsen/examens; belangrijk voor zak/slaag regeling
. Alle summatieve toetsen moeten in het examenplan staan.

Toetsen in het mbo

• Formatieve toetsen
  

Vaak toetsen om beroepsgerichte vakken af te sluiten

• Summatieve toetsen
  

CITO = centraal instituut toetsontwikkeling

Nederlands, Engels en rekenen

Beroepsgerichte examens

Examens voor het keuzedeel