Beoordelen in het mbo 3

• pedagogiek
• HBO
• Studiejaar 1

Beoordelen in het mbo

Bijeenkomst 3 

Susan Coevert

Mededelingen

Focus gesprek Ingeborg

Programma

Terugblik vorige les

Lesdoelen 

Taxonomie

Betrouwbaarheid en validiteit

Theorie: Taalniveaus bepalen 

Werkvorm: Analyse meegenomen toets d.m.v. betrouwbaarheid, validiteit en taal. Uitvoerbaarheid van toetsen

Terugblik

Volgende keer

Lesdoelen

Je kan toetsen analyseren met behulp van de taalniveaus

Je kan beoordelen of de toets betrouwbaar en valide is

Je kan de uitvoerbaarheid van de toets beoordelen

Wat wordt bedoeld met constructive aligment?

Eindopdracht

Eindopdracht deel A: Je analyseert het toetsbeleid

Eindopdracht deel B: Je selecteert een toets uit de praktijk waarbij verbetering wenselijk is en je onderbouwt je keuze voor de betreffende toets.

Wie heeft opdracht A af?

JA, het is af

Ik ben er aan begonnen

Ik ben er nog niet aan toegekomen

Opdracht B

• Je selecteert een toets uit de praktijk waarbij verbetering wenselijk is en je onderbouwt je keuze voor de betreffende toets
• De keuze van de toets uit de verzameling toetsen van de intervisiegroep wordt onderbouwd door middel van:
  

• Betrouwbaarheid

• Laag slagingspercentage.

• Niet in lijn met toetsbeleid.

• Lage validiteit.

• Negatieve feedback van studenten.

• Te eenzijdige toetsvragen

Kwaliteitseisen toets

validiteit, betrouwbaarheid, specificiteit, moeilijkheid, discriminerend vermogen, transparantie, beschikbare tijd en (taal)technische kwaliteit.

Specificiteit: Een toets of opdracht is specifiek als een student pas een goede prestatie kan leveren als hij de vastgestelde leerdoelen heeft bereikt, met andere woorden: als hij de leerstof beheerst.

Discriminerend vermogen: De toetst maakt het verschil zichtbaar tussen studenten die de stof beheersen en studenten die de stof niet beheersen en tussen 'goede' en 'minder goede' studenten.

https://www.slo.nl/handreikingen/vmbo/handreiking-se-gesch-vmbo/toetsen-schoolexamen/eisen-goede-toets/

Betrouwbaarheid en validiteit

Meet je wat je wilt meten?

- De kernpunten uit de aangeboden leerstof op het gewenste       niveau.

Is de toets representatief?

- Aantal vragen is gerelateerd aan omvang en belang van het onderdeel in de lesstof

Metafoor

Validiteit

=Meet je wat je wilt meten

- Je wilt de omtrek van een appel meten en je gebruikt daarvoor een weegschaal

Betrouwbaarheid

= krijg je door de meting steeds dezelfde uitslag?

- Je wilt de omtrek van een appel meten en je gebruikt daarvoor een elastisch meetlint.

Iedere appel heeft een andere omtrek

Validiteit toets verhogen: Taxonomieën

Kwaliteit van een toets – Uitvoerbaarheid

Efficiency

Kies, met behoud van de andere kwaliteitseisen, voor een toets(vorm) die studenten en docenten zo min mogelijk tijd kost

Eerlijkheid

Iedere student krijgt een even grote kans om zijn competentie te demonstreren.

Beschikbare tijd

Er is voldoende tijd om de toets te maken.

Geen speedtest van maken.

Taalniveau van de toets

Taal technische kwaliteit: Taalniveaus

MEIJERINK

basisonderwijs	1 F
vmbo en mbo-1, mbo-2 en mbo-3	2 F
havo en mbo-4	3 F
vwo	4 F

Oefenen met taalniveaus

Lees de tekst en beoordeel bij welk niveau deze hoort.

file:///C:/Users/SNCT/Downloads/referentiekader_taal_en_rekenen_referentieniveaus.pdf

beoordelen toets

Beoordeel je toets op:

Betrouwbaarheid en validiteit

Specificiteit, moeilijkheid, discriminerend vermogen, transparantie, beschikbare tijd

Taalniveau  (op juiste niveau vragen gesteld?)

Volgende keer

Toetsmatrijs

Taxonomieën

Voordeel

- Nadenken over wat er met de kennis gedaan moet worden

- Geeft structuur aan de toets, maakt toetsen afwisselend

- Hulp validiteit.

Nadeel

- Vaak geen onderliggend bewijs/redenering, niet altijd helemaal wetenschappelijk waterdicht.

- Subjectieve indeling, overlap.

- Noodzakelijke volgorde: onthouden, begrijpen, toepassen.

Bron: https://score.hva.nl/Bronnen/Overzicht%20taxonomieën.pdf

Link op mijn hva.nl -> Taxonomieën zijn hot en handig

Taxonomieën

Taxonomie van Miller

https://tauu.uu.nl/wp-content/uploads/2015/03/Handout-1a-Wanneer-kiezen-voor-Multiple-Choice.pdf

Miller

Indeling van toetsen volgens de competentiedriehoek van Miller

Knows:                    Kennistoets:

                                    open en gesloten vragen, antwoordmodel.

Knows how:           Casustoets, vaardigheidstoets,

                                     antwoordmodel, gedragscriteria.

Shows how:           Casustoets, simulaties, project, BPV-opdracht

                                    rubrics, gedragscriteria.

Does:                        Praktijkexamens, afstudeeronderzoek

                                    rubrics, gedragscriteria, CGI Triangulatie essentieel

Taxonomie van Bloom

Van der Kamp (2016)

http://www.expertisecentrum-kunsttheorie.nl/cms_data/bloom.pdf

analyseren onderliggende taxonomieën toets 

20 min

Kies gezamenlijk in ieder geval 1 toets die het meest leerzaam is om te analyseren op dit gebied. Geef expliciet aan waarom deze het meeste interessant is om te analyseren.

Miller.           Op welke niveaus van Miller heeft de toets b etrekking?.

Bloom.         Bepaal op welk(e) niveau(s) de doelen zijn geformuleerd. Eerst hoge vs. lage orde,                                dan specifiek een niveau.

                        Bepaal op welk(e) niveau (s) de vragen zijn geformuleerd. Eerst hoge vs. lage orde,                              dan specifiek een niveau.

Bedenk een mogelijke verbeteractie nav. de inzichten die je hebt opgedaan.