Ga naar de inhoud
Exam passing scores: how to set a fair cutoff mark

Hoe bepaal je een geschikte minimumscore voor een examen?

Heb je je ooit afgevraagd hoe je de slagingsscore voor een examen bepaalt, hetzij voor school, of voor een toelatingsproef of certificeringstest?

Het bepalen van de slagingsscore is een cruciaal onderdeel van testen, vooral voor certificeringen en licenties. De belangrijkste conclusie? Willekeurige slagingsscores houden geen stand en kunnen de geloofwaardigheid van de test ernstig aantasten.

Wat is ‘standard setting’?

online proctoringAls we het hebben over ‘standard setting’, bedoelen we het proces van het bepalen van de minimale score die iemand nodig heeft om te slagen voor een test. Simpel gezegd beantwoordt het de vraag: “Hoe goed moet een kandidaat presteren om te laten zien dat hij de stof begrijpt?”.

Traditioneel gebruiken examenorganisatoren een absolute slagingsscore, dat wil zeggen een vast percentage. Een kandidaat moet bijvoorbeeld 60% van de vragen goed beantwoorden om te slagen.

Methodes

Er zijn verschillende bekende methoden voor het vaststellen van minimumscores, zoals de Angoff, Ebel, en Bookmark methoden. Deze benaderingen vertrouwen op het oordeel van experts en worden toegepast voordat de test wordt afgenomen. Ze hebben echter een paar nadelen:

  • Tijd & kosten: Het samenstellen van panels van experts om de minimaal aanvaardbare prestaties voor elk testonderdeel vast te stellen kan duur en tijdrovend zijn, vooral voor interne testen.
  • Subjectiviteit: Deze methoden kunnen nog steeds subjectief zijn, omdat ze afhankelijk zijn van menselijk oordeel. Experts kunnen verschillende definities hebben van een “minimaal competente kandidaat” (Angoff), het oneens zijn over hoe items te classificeren (Ebel), of worstelen met het interpreteren van de item map (Bookmark).

De Cohen-methode kan worden beschouwd als een slim alternatief voor kostbare en mogelijk subjectieve panels van deskundigen door alleen te vertrouwen op echte testgegevens.

Wat is de ‘Cohen-methode’?

Exam passing scores: how to set a fair cutoff markDe Cohen-methode bepaalt het slagingspercentage door te kijken naar de scores van de best presterende leerlingen. Als je bijvoorbeeld de score van een topstudent neemt (meestal rond de top 5%) en het slagingspercentage op 60% van die score instelt, pas je automatisch aan voor hoe moeilijk of makkelijk de test is.

Dit betekent dat als een test moeilijker is, het slagingspercentage daalt om de algehele prestatie te evenaren, en als de test gemakkelijker is, het slagingspercentage licht stijgt. Deze dynamische aanpak maakt de test eerlijker voor iedereen.

Merk op dat de keuze van 60% niet willekeurig is. Het is gebaseerd op onderzoek uit het begin van de jaren 2000 door Cohen-Schotanus en Van der Vleuten, die ontdekten dat het gebruik van 60% van de scores van de best presterende een eerlijkere en betekenisvollere standaard oplevert dan het willekeurig kiezen van een percentage.

‘Cohen’ vs. ‘Modified Cohen’

In de loop der tijd hebben opvoeders een aantal aanpassingen gedaan aan de oorspronkelijke Cohen-methode om de eerlijkheid en nauwkeurigheid te verbeteren. De ‘Modified Cohen’-methode maakt twee belangrijke veranderingen:

  • Het verwijdert enkele aanpassingen die zijn gemaakt om rekening te houden met gokwerk op meerkeuzevragen.
  • Het verschuift het referentiepunt van de top 5% van de scores naar de top 10%, wat helpt om meer consistente slagingsscores te creëren.

Beide methoden hebben hetzelfde basisidee – de prestaties van de beste leerlingen gebruiken om de slagingsscore vast te stellen – maar de aangepaste versie streeft naar wat meer stabiliteit en eenvoud in alledaagse toetssituaties.

Slaagscores in assessmentQ

Goed nieuws voor docenten die het digitale examenplatform assessmentQ gebruiken: je kunt nu de slagingsscore van een toets aanpassen, zelfs nadat kandidaten de toets hebben gemaakt. Dit betekent dat je de Cohen of Gewijzigde Cohen methode kunt toepassen op je toetsen.

Zodra de slagingsscore is bijgewerkt, herberekent het systeem automatisch alle rapporten en itemanalyses, zodat elk resultaat de juiste en eerlijke slagingsscore voor die test weergeeft.

Exam passing scores: how to set a fair cutoff mark
Icon-book-a-call_white

Curious for more?

Feel free to book a short call with one of our experts.