Het is zover, vanaf september is de adaptieve capaciteitentest (MCT-A) beschikbaar via het NOA Talent Portal.
Veel klanten van NOA kennen de Multiculturele Capaciteitentest waarvan een versie voor middelbaar en een versie voor hoger opleidingsniveau bestaat. De afgelopen jaren heeft Michiel Hol, onderzoeker en ontwikkelaar bij NOA hard gewerkt aan de volgende stap in de ontwikkeling van deze tests, namelijk de adaptieve capaciteitentest. Een test die tijdens het afnemen reageert op het vaardigheidsniveau van de kandidaat en zo uitkomsten “op maat” oplevert. “Het was een mooi en uitdagend project, maar ik ben blij dat de test nu beschikbaar is voor onze klanten en echt gebruikt gaat worden.”
Hoe werkt zo’n adaptieve test? Het principe is dat de kandidaten vragen krijgen die zijn gebaseerd op zijn of haar eerdere antwoorden. Als iemand bijvoorbeeld goed is in rekenen en de beginvragen correct en binnen de tijd beantwoordt, registreert het testprogramma dat, waarna het vervolgvragen kiest die lastiger zijn. Tot die voor de kandidaat te moeilijk worden en een stapje terug wordt gedaan totdat het juiste niveau is bereikt. Andersom registreert het programma het ook wanneer de beginvragen te moeilijk zijn, dan wordt het niveau naar beneden bijgesteld. Michiel: “Op deze manier kan sneller en nauwkeuriger het vaardigheidsniveau van de betreffende kandidaat worden bepaald.”
Tijdens de test kan de kandidaat niet terug naar een vorige vraag, dat is een verschil met de klassieke capaciteitentest. Daarnaast is het taalgebruik van de instructie en rapportage eenvoudiger. En heel belangrijk de test zelf is korter en kan daardoor sneller worden afgerond. Dat komt doordat kandidaten minder vragen hoeven te beantwoorden die niet bij hun vaardigheidsniveau passen. Al met al is de nieuwe adaptieve test een stuk gebruiksvriendelijker.
Michiel benadrukt dat een adaptieve test geen AI is. De test is gebaseerd op een statistisch model. Voor de adaptieve capaciteitentest zijn alle berekeningen eerst voorbereid in het statistisch programma R. Bij adaptief testen worden namelijk tijdens het invullen van de test allerlei berekeningen uitgevoerd die vooraf zijn uitgewerkt. De programmeurs hebben alle berekeningen vervolgens ingebouwd in de NOA Talent Portal. “Hierna volgde het eerste echte testen. Maar dat is erg leuk om te doen omdat je dan ziet of het werkt zoals je hoopte.”
Inmiddels zijn alle analyses en onderzoeken afgerond en is de MCT-A sinds september operationeel. “Afgelopen jaar hebben we de software uitgebreid onderzocht en getest en zijn er kleine aanpassingen en verbeteringen doorgevoerd. Maar het blijft altijd spannend als een nieuwe test echt in gebruik wordt genomen.”
|
Kenmerken en voordelen van de MCT-A
|
- De MCT-A kan afgenomen worden in plaats van de MCT-M of de MCT-H en is dus geschikt voor zowel middelbaar als hoger niveau
- De MCT-A begint voor iedereen op een relatief laag niveau
- De MCT-A bestaat uit zes subtests: Vergelijken van woorden, Logisch nadenken met woorden, Rekenen, Logisch nadenken met cijfers, Logisch nadenken met plaatjes, Combineren van vormen
- De MCT-A is sneller maar toch precies
- Een kandidaat krijgt steeds vragen aangeboden gebaseerd op eerdere antwoorden in de test. De MCT-A geeft daardoor een betere aansluiting op kandidaten
- De vragen raken minder snel bekend door de grotere hoeveelheid beschikbare vragen
- Afkijken is lastiger tijdens grootschalige afnames door verschillen in vraagselectie en verschillen in vraagvolgorde
|
