Om toetsaanbieders te ondersteunen bij het ontwikkelen van een betrouwbare doorstroomtoets, zijn er wettelijke richtlijnen opgesteld waarop wij onze vragen (items) elk jaar zorgvuldig afstemmen. Dit betekent dat wij jaarlijks vragen verwijderen en nieuwe vragen toevoegen aan de ROUTE 8 doorstroomtoets. Met het ROUTE 8 normeringsonderzoek testen we of de nieuwe vragen geschikt zijn om op te nemen in de toets.
Waarom nieuwe vragen en wie bedenkt ze?
Soms past een vraag niet meer bij de huidige tijdgeest, denk aan de snelle ontwikkelingen op technologisch vlak. Ook wil je niet dat vragen te vaak zijn ingezet, vanwege de kans op uitlekken en fraudegevoeligheid. Voor de ontwikkeling van nieuwe vragen werken onze toetsdeskundigen Carleyn, Isa en Floor samen met itemconstructeurs op de domeinen Begrijpend lezen, Rekenen en Taalverzorging. Samen zorgen zij voor inhoudelijk goede vragen.
Moeilijkheidsgraad in balans
ROUTE 8 is adaptief op vraagniveau. Dat betekent dat de moeilijkheidsgraad van de vervolgvraag wordt afgestemd op de eerder gegeven antwoorden: het systeem stemt de vragen af op het vaardigheidsniveau van de leerling. Zo worden leerlingen altijd uitgedaagd tot de bovengrens van hun niveau én worden zij niet onnodig belast met veel te moeilijke, of veel te makkelijke vragen. Bovendien krijgen leerlingen dankzij het adaptieve systeem ook niet méér vragen dan noodzakelijk is.
Breed palet aan goede vragen
Om de vragen goed te laten aansluiten op de verschillende leerlingen en hun vaardigheidsniveau, zijn onze vragen verspreid over een breed palet qua moeilijkheidsgraad. We willen natuurlijk alleen maar vragen die bijdragen aan het doel van de toets: het meten van het vaardigheidsniveau van leerlingen voor een passend schooladvies.
Welke vragen zijn geschikt?
Tijdens het jaarlijkse normeringsonderzoek testen we in november en december iedere potentieel nieuwe ROUTE 8 vraag door deze aan leerlingen voor te leggen. Daarna volgt de eindanalyse. In afstemming met onze toetsdeskundigen Carleyn, Isa en Floor, die verantwoordelijk zijn voor de inhoudelijke controle, voert onze psychometricus Frank deze eindanalyse uit. Samen stemt het team zorgvuldig af welke vragen geschikt zijn voor de doorstroomtoets van het hierop volgende schooljaar.
Psychometrisch onderzoek en inhoudelijke beoordeling
Bij de eindanalyse bekijkt psychometricus Frank of een vraag vaak genoeg beantwoord is – en dus bijdraagt aan het meten van de vaardigheid van leerlingen. Daarnaast bekijkt hij hoe goed of slecht een vraag door leerlingen wordt gemaakt. Zijn er extremen waarbij een antwoord van een meerkeuze vraag veel te weinig óf veel te vaak is gekozen? Ook dan draagt de vraag niet bij aan het meten van het vaardigheidsniveau. De antwoordoptie is dan te voor de hand liggend, waardoor te veel leerlingen de vraag goed beantwoorden – óf juist té complex, waardoor te veel leerlingen de vraag fout beantwoorden. Ook meerkeuze antwoordopties die nauwelijks worden gekozen, komen te vervallen of worden vervangen; iedere antwoordoptie moet een bepaalde mate van aantrekkelijkheid hebben. Het kan ook voorkomen dat een foute antwoordoptie veel te vaak wordt gekozen. In dat geval wordt de vraag afgekeurd, want strikvragen willen we ook niet.
Alles voor een betrouwbare en waardevolle doorstroomtoets
Zo zorgen we ervoor dat elke vraag in ROUTE 8 eerlijk, helder en effectief bijdraagt aan het meten van leerlingvaardigheden. Alleen zorgvuldig getoetste en gebalanceerde vragen halen de eindstreep. Zo blijft ROUTE 8 een betrouwbare en waardevolle doorstroomtoets voor iedereen!
