Bij de Tentamenservice van de afdeling OKP bestaat de mogelijkheid meerkeuzetoetsen automatisch te laten verwerken. Bij de uitslag van de toets wordt altijd een itemanalyse (en interpretatie hiervan) bijgeleverd. De itemanalyse van een toets geeft informatie over de kwaliteit van het tentamen in het algemeen (moeilijkheidsgraad en betrouwbaarheid) en over die van de vragen in het bijzonder. De informatie die door de Tentamenservice geleverd wordt, geeft de docent en eventueel een Examencommissie inzicht in de kwaliteit van de toets en geeft hierbij handvatten voor het verbeteren van toetsen. Zo kan deze analyse een belangrijke bijdrage leveren aan de kwaliteitszorg omtrent toetsing.
Het kan hierbij gaan om meerkeuzetoetsen met vragen met twee, drie, vier, vijf of zes antwoordmogelijkheden (alternatieven).
Daarnaast is het mogelijk de toets af te nemen in maximaal zes verschillende volgordeversies (waarbij de vragen in een andere volgorde staan om afkijken tegen te gaan).
Na verwerking krijgt de docent via e-mail de volgende gegevens:
- per student op naam en studentnummer de ´ruwe´ score (het aantal goed beantwoorde vragen) en het daaraan verbonden cijfer (naar keuze op hele punten, halve punten of decimalen);
- het percentage gezakte studenten (cijfer lager dan 6.0 èn cijfer lager dan 5½). Daarvoor moet een zogenaamde cesuurscore worden opgegeven, dat wil zeggen de ruwe score die naar het oordeel van de docent overeen zou moeten komen met het cijfer 6.0;
- de verdeling van de ruwe scores en de cijferverdeling over alle deelnemende studenten;
- de item- analyse met daarbij: a. per vraag en per alternatief het percentage studenten dat het desbetreffende alternatief heeft gekozen (a-waarden); b. per vraag het percentage studenten dat de vraag goed heeft beantwoord (p-waarden) en de discriminatiewaarden (item-restcorrelaties of Rir-waarden): indicatie van de mate waarin een vraag onderscheid maakt tussen studenten met en studenten zonder kennis van de stof; c. de betrouwbaarheid van het tentamen (KR-20) en de moeilijkheidsgraad (gemiddelde P-waarde).
- een korte toelichting van de psychometrische begrippen in het algemeen en de interpretatie ervan voor de betreffende toets.
Voor een voorbeeld van een begeleidende brief bij de item-analyse zie: Voorbeeldbrief Tentamenanalyse
Naar aanleiding van de uitslag en de uitkomsten van de item-analyse is het mogelijk de toets opnieuw te laten verwerken (in beginsel maximaal één keer), bijvoorbeeld met weglating van kennelijk ongeschikte vragen en/of het goedkeuren van meerdere alternatieven. De Tentamenservice verwerkt de toets in principe binnen vijf werkdagen, beginnend met de dag nà inlevering van het tentamen in de inleverbox. De inleverbox bevindt zich in het souterrain van het Hoofdgebouw, naast de trap, tegenover security desk KC-04.
