Een live assessment bewerken

Waarom ingeleverde resultaten nooit veranderen

De resultaten van een kandidaat worden berekend uit de opgeslagen scores per antwoord van die poging: de automatische score die is vastgelegd toen de kandidaat antwoordde, en de rubricscores die uw beoordelaars hebben ingevoerd. Het bewerken van de structuur van het assessment herschrijft die opgeslagen scores nooit, dus het toevoegen, bewerken, herordenen of verwijderen van items verandert niets aan een kandidaat die al heeft ingeleverd.

Items die u toevoegt nadat een kandidaat heeft ingeleverd, worden in de optelling van die kandidaat simpelweg overgeslagen — een ontbrekend antwoord wordt nooit als nul behandeld, dus nieuwe vragen kunnen eerdere kandidaten niet stilzwijgend omlaag trekken. De builder toont bij live assessments een melding die dit bevestigt terwijl u bewerkt.

Waar wijzigingen in gewichten en punten wél effect op hebben

Er is één eerlijke uitzondering op "er verandert niets": de instellingen voor aggregatie. De rolfit is een gewogen optelling die uit de opgeslagen scores wordt berekend met de huidige sectiegewichten, de gewichten van de vaardigheidskoppeling en de punten van items. Ruwe scores blijven bevroren, maar wijzigt u het scoregewicht van een sectie of de punten van een item in een live assessment, dan worden de rolfitpercentages opnieuw berekend met de nieuwe weging — voor elke kandidaat, ook voor wie al heeft ingeleverd.

Dat is bewust zo: iedereen wordt altijd langs dezelfde actuele regels gemeten, zodat kandidaten vergelijkbaar blijven. Maar het betekent wel dat wijzigingen in gewichten midden in een cohort de ranglijst verschuiven waar u al naar keek. Bij assessments die aan een rolprofiel zijn gekoppeld, bewaren vastgelegde beslissingen bovendien een momentopname van de rolfit op het moment dat elke beslissing werd genomen, zodat uw beslissingsdossier verdedigbaar blijft.

• Inhoud van items, volgorde en nieuwe items: geen effect op kandidaten die hebben ingeleverd.
• Sectiegewichten, vaardigheidsgewichten, punten van items: de rolfit wordt voor iedereen opnieuw samengesteld.
• Wijzigingen in de antwoordsleutel gelden alleen voor toekomstige inleveringen; eerdere antwoorden houden hun vastgelegde score.
• Bij assessments die aan een rolprofiel zijn gekoppeld, bewaren vastgelegde beslissingen een momentopname van de rolfit op het moment van beslissen.

Kandidaten die midden in een poging zitten of nog moeten beginnen

Kandidaten die na uw bewerking beginnen, krijgen het bijgewerkte assessment. Een kandidaat die midden in een poging zit, gaat verder met de versie die is geladen; hervat of ververst die, dan krijgt de kandidaat de bijgewerkte structuur, en elk al opgeslagen antwoord blijft aan het bijbehorende item gekoppeld.

Denk bij bewerkingen die veranderen wát er wordt gemeten — een taak vervangen, een antwoordsleutel wijzigen, secties opnieuw wegen — eerst na over vergelijkbaarheid voordat u midden in een cohort bewerkt: kandidaten van vóór en van na de wijziging hebben iets verschillende assessments gemaakt. Bij een inhoudelijk herontwerp is de schonere route het assessment te dupliceren naar een nieuw concept en het volgende cohort op de nieuwe versie af te nemen.

Wanneer bewerken is vergrendeld

Zodra een assessment is gesloten of gearchiveerd, vergrendelt de structuur en zijn de resultaten definitief — de builder meldt dat en biedt in plaats daarvan dupliceren aan. Dupliceer het naar een nieuw concept om wijzigingen te maken; het duplicaat neemt de structuur, de gewichten en de momentopnamen van rubrics mee.

Bewerken vereist daarnaast het recht om de structuur te bewerken in uw werkomgeving. Kunt u de builder wel zien maar niet wijzigen, dan legt een melding uit dat uw rol geen structurele bewerkingen omvat.