Beoordelen in het mbo 2

• pedagogiek
• HBO
• Studiejaar 1

Beoordelen in het mbo

Bijeenkomst 2

Martijn Dozy en Susan Coevert

Programma

Terugblik vorige les

Artikel bespreken

Lesdoelen 

Theorie: Constructive alignment.

Werkvorm: Analyse meegenomen toets d.m.v. constructive alignment.

Theorie: Taxonomie Bloom, Miller.

Werkvorm: Analyse meegenomen toets d.m.v. taxonomieën.

Vooruitblik

Terugblik

Breakoutrooms -> artikel bespreken

Toetsen in het mbo

Soorten toetsen

Groepjes indelen

Lesdoelen

Je kunt een toets selecteren om te gebruiken voor werkvormen op basis van argumenten.

Je kan bepalen of er sprake is van constuctive alignment tussen de lesmethode, doelen en de toetsing.

Je kan toetsen analyseren met behulp van het competentieprofiel van Miller

Je kan leerdoelen en toetsvragen analyseren met behulp van de taxonomie van Bloom.

Summatieve toetsen zijn

1. Zijn toetsen waarvan de uitslag op het diploma komt
2. Zijn voortgangstoetsen
3. examens

De OER staat voor

1. Onderwijs en examenplan registratie
2. Onderwijs en examen rapport
3. Onderwijs en examen regeling
4. Onderwijs en examen reglement

artikel terugkoppeling

Eindopdracht

Eindopdracht deel A: Je analyseert het toetsbeleid

Eindopdracht deel B: Je selecteert een toets uit de praktijk waarbij verbetering wenselijk is en je onderbouwt je keuze voor de betreffende toets.

Opdracht A

Je analyseert het toetsbeleid:

• Vanuit meerdere invalshoeken het toetsbeleid onderzoeken.
  
• Toetsbeleid van de organisatie is inzichtelijk.
  

              - Belangrijke kwaliteitsborgingsprincipes.

              - Functie(s) van toetsen.

               - Borgen eindniveau.

Opdracht A

• Het toetsbeleid wordt zowel beschreven door gebruik te maken van documenten als interviews met betrokkenen.  
• Uit de beschrijving van het toetsbeleid worden de volgende overtuigend onderwerpen beschreven: belangrijke kwaliteitsborgingsprincipes, de (didactische) functie van toetsen en het borgen van het eindniveau van de opleiding. De beschrijving wordt expliciet ondersteund met theorie (dmv. van een APA-referentie). Hieruit blijkt een kritische blik.
  

Opdracht B

• Je selecteert een toets uit de praktijk waarbij verbetering wenselijk is en je onderbouwt je keuze voor de betreffende toets
• De keuze van de toets uit de verzameling toetsen van de intervisiegroep wordt onderbouwd door middel van:
  

• Betrouwbaarheid.

• Laag slagingspercentage.

• Niet in lijn met toetsbeleid.

• Lage validiteit.

• Negatieve feedback van studenten.

• Feedbackfunctie.

Opdracht B

De keuze wordt onderbouwd door de keuze van de toets op minimaal vier van de criteria correct te baseren. Hierbij wordt naar literatuur verwezen en/of naar concrete feedback van studenten.

OER

Heb je het OER kunnen vinden?

Bekeken? 

Summatieve en formatieve toetsen in het OER?

Wat weet je over het toetsbeleid van jouw ROC?

Toetsbeleid

Hoe ziet de organisatie rondom het examineren eruit?

Wat zijn de richtlijnen voor de summatieve en formatieve toetsen?

Is er een toetsconstructeur in het team?

Heeft het team een formatief toetsbeleid?

Toetsbeleid

Bekijk de opbouw van kwaliteitspiramide voor toetsen op: http://www.open.ou.nl/dbr/uitlegpiramide.html

Constructive aligment

Constructive Alignment

Toetsproces

Stappen:

1. Ontwerpen
(welke leerdoelen ga je toetsen)

2. Construeren toetsmatrijs

3. Construeren toets

4. Afnemen

5. Nakijken en beoordelen

6. Analyseren en

7. Evalueren en verbeteren

Bron: toetscyclus van Milius 2007

Aan de slag - 20 min

In groepjes aan het werk

Bekijk elkaars toetsen en selecteer er één.

Ga in je groepje de toets die je hebt geselecteerd beoordelen op constructive aligment

Doel: analyseren mate van constructive alignement van toetsen.

Toets analyse 

1. Bepaal, voor zover mogelijk, in hoeverre er sprake is van constructive alignement bij de meegenomen toetsen.

2. Kies gezamenlijk in ieder geval 1 toets die het meest leerzaam is om te analyseren op dit gebied. Geef expliciet aan waarom deze het meeste interessant is om te analyseren.

3. Ga in ieder geval in op de relaties 1 en 2. zie schema.

4. Bedenk een mogelijke verbeteractie. Probeer de keuze te beargumenteren.

Taxonomieën

Voordeel

- Nadenken over wat er met de kennis gedaan moet worden

- Geeft structuur aan de toets, maakt toetsen afwisselend

- Hulp validiteit.

Nadeel

- Vaak geen onderliggend bewijs/redenering, niet altijd helemaal wetenschappelijk waterdicht.

- Subjectieve indeling, overlap.

- Noodzakelijke volgorde: onthouden, begrijpen, toepassen.

Bron: https://score.hva.nl/Bronnen/Overzicht%20taxonomieën.pdf

Link op mijn hva.nl -> Taxonomieën zijn hot en handig

Taxonomieën

Taxonomie van Miller

https://tauu.uu.nl/wp-content/uploads/2015/03/Handout-1a-Wanneer-kiezen-voor-Multiple-Choice.pdf

Miller

Indeling van toetsen volgens de competentiedriehoek van Miller

Knows:                    Kennistoets:

                                    open en gesloten vragen, antwoordmodel.

Knows how:           Casustoets, vaardigheidstoets,

                                     antwoordmodel, gedragscriteria.

Shows how:           Casustoets, simulaties, project, BPV-opdracht

                                    rubrics, gedragscriteria.

Does:                        Praktijkexamens, afstudeeronderzoek

                                    rubrics, gedragscriteria, CGI Triangulatie essentieel

Taxonomie van Bloom

Van der Kamp (2016)

http://www.expertisecentrum-kunsttheorie.nl/cms_data/bloom.pdf

analyseren onderliggende taxonomieën toets 

20 min

Kies gezamenlijk in ieder geval 1 toets die het meest leerzaam is om te analyseren op dit gebied. Geef expliciet aan waarom deze het meeste interessant is om te analyseren.

Miller.           Op welke niveaus van Miller heeft de toets b etrekking?.

Bloom.         Bepaal op welk(e) niveau(s) de doelen zijn geformuleerd. Eerst hoge vs. lage orde,                                dan specifiek een niveau.

                        Bepaal op welk(e) niveau (s) de vragen zijn geformuleerd. Eerst hoge vs. lage orde,                              dan specifiek een niveau.

Bedenk een mogelijke verbeteractie nav. de inzichten die je hebt opgedaan.

Terugkoppelen

Wat is jullie opgevallen?

Lesdoelen

Je kunt een toets selecteren om te gebruiken voor werkvormen op basis van argumenten.

Je kan bepalen of er sprake is van constuctive alignment tussen de lesmethode, doelen en de toetsing.

Je kan toetsen analyseren met behulp van het competentieprofiel van Miller

Je kan leerdoelen en toetsvragen analyseren met behulp van de taxonomie van Bloom.

Volgende keer

Toetsmatrijs