Zum Inhalt springen
SkillCort

Help articleBuilding assessments

Ein Live-Assessment bearbeiten

Sie können ein Assessment auch nach dem Livegang weiter bearbeiten – Items hinzufügen, bearbeiten, umsortieren oder entfernen, ohne es offline zu nehmen. Dieser Artikel erklärt genau, was mit Bewerbenden passiert, die bereits abgegeben haben, die mitten im Versuch sind und die nach Ihrer Änderung starten.

Warum abgegebene Ergebnisse sich nie ändern

Die Ergebnisse einer bewerbenden Person werden aus den gespeicherten Bewertungen je Antwort dieses Versuchs berechnet: der automatischen Bewertung, die beim Antworten erfasst wurde, und den Rubrikbewertungen, die Ihre Prüfenden eingegeben haben. Das Bearbeiten der Struktur eines Assessments überschreibt diese gespeicherten Bewertungen nie, sodass Hinzufügen, Bearbeiten, Umsortieren oder Entfernen von Items nichts an einer bewerbenden Person ändert, die bereits abgegeben hat.

Items, die Sie nach der Abgabe einer bewerbenden Person hinzufügen, werden in deren Zusammenführung schlicht übersprungen – eine fehlende Antwort wird nie als Null behandelt, sodass neue Fragen frühere Bewerbende nicht unbemerkt nach unten ziehen können. Der Builder zeigt in Live-Assessments beim Bearbeiten einen Hinweis, der diese Zusicherung bestätigt.

Was Änderungen an Gewichten und Punkten bewirken

Es gibt eine ehrliche Ausnahme von „nichts ändert sich“: die Aggregationseinstellungen. Die Rollenpassung ist eine gewichtete Zusammenführung, die aus gespeicherten Bewertungen mit den aktuellen Abschnittsgewichten, den Gewichten der Kompetenzzuordnung und den Item-Punkten berechnet wird. Die Rohbewertungen bleiben eingefroren, aber wenn Sie in einem Live-Assessment das Scoring weight eines Abschnitts oder die Punkte eines Items ändern, werden die Prozentwerte der Rollenpassung mit der neuen Gewichtung neu berechnet – für alle Bewerbenden, auch für jene, die bereits abgegeben haben.

Das ist so gewollt: Alle werden immer nach denselben aktuellen Regeln gemessen, sodass Bewerbende vergleichbar bleiben. Es bedeutet aber, dass Änderungen an Gewichten mitten in einer Kohorte die Rangliste verschieben, die Sie bereits betrachtet haben. Bei Assessments, die mit einem Rollenprofil verknüpft sind, behalten erfasste Entscheidungen zusätzlich einen Snapshot der Rollenpassung aus dem Moment, in dem die jeweilige Entscheidung getroffen wurde, sodass Ihr Entscheidungsdatensatz begründbar bleibt.

  • Inhalt und Reihenfolge von Items sowie neue Items: keine Auswirkung auf Bewerbende mit abgegebenem Versuch.
  • Abschnittsgewichte, Kompetenzgewichte, Item-Punkte: Die Rollenpassung wird für alle neu aggregiert.
  • Änderungen am Antwortschlüssel gelten nur für künftige Abgaben; frühere Antworten behalten ihre erfasste Bewertung.
  • Bei Assessments, die mit einem Rollenprofil verknüpft sind, behalten erfasste Entscheidungen einen Snapshot der Rollenpassung zum Entscheidungszeitpunkt.

Bewerbende mitten im Versuch oder noch vor dem Start

Bewerbende, die nach Ihrer Änderung starten, absolvieren das aktualisierte Assessment. Wer mitten im Versuch ist, arbeitet auf der Fassung weiter, die geladen wurde; beim Fortsetzen oder Neuladen erhält die Person die aktualisierte Struktur, und jede bereits gespeicherte Antwort bleibt an ihrem Item.

Bei Änderungen, die verändern, was gemessen wird – eine Aufgabe austauschen, einen Antwortschlüssel ändern, Abschnitte neu gewichten –, denken Sie vor einer Bearbeitung mitten in der Kohorte an die Vergleichbarkeit: Bewerbende vor und nach der Änderung haben leicht unterschiedliche Assessments beantwortet. Für eine grundlegende Neugestaltung ist der sauberere Weg, das Assessment in einen neuen Entwurf zu duplizieren und die nächste Kohorte auf der neuen Fassung durchzuführen.

Wann das Bearbeiten gesperrt ist

Sobald ein Assessment geschlossen oder archiviert ist, ist seine Struktur gesperrt und seine Ergebnisse sind endgültig – der Builder weist Sie darauf hin und bietet stattdessen das Duplizieren an. Duplizieren Sie es in einen neuen Entwurf, um Änderungen vorzunehmen; das Duplikat übernimmt Struktur, Gewichte und Rubrik-Snapshots.

Das Bearbeiten erfordert außerdem die Berechtigung für Strukturänderungen in Ihrem Arbeitsbereich. Wenn Sie den Builder sehen, aber nicht ändern können, erklärt ein Hinweis, dass Ihre Rolle keine strukturellen Änderungen umfasst.

At a glance

  • Assessments im Entwurf und im Live-Status sind beide bearbeitbar; geschlossene und archivierte Assessments sind gesperrt.
  • Bewerbende, die bereits abgegeben haben, behalten ihre exakten Ergebnisse – die Bewertungen stammen aus dem, was sie beantwortet haben.
  • Items, die nach der Abgabe einer bewerbenden Person hinzugefügt wurden, werden in deren Zusammenführung übersprungen und nie als Null gezählt.
  • Das Ändern von Bewertungsgewichten oder der Punkte eines Items gewichtet die Rollenpassung für alle neu, auch für frühere Bewerbende.
  • Bewerbende, die nach Ihrer Änderung starten oder fortsetzen, sehen die aktualisierte Fassung.

Häufig gestellte Fragen

Ich habe in einem Live-Assessment einen falschen Antwortschlüssel korrigiert. Werden frühere Bewerbende neu bewertet?
Nein. Automatische Bewertungen werden zum Zeitpunkt der Abgabe erfasst, sodass frühere Antworten die Bewertung behalten, die sie unter dem alten Schlüssel erhalten haben, und spätere Abgaben mit dem korrigierten Schlüssel bewertet werden. Wenn der Fehler frühere Bewerbende betroffen hat, prüfen Sie diese Antworten manuell – Bewertungen von Prüfenden haben Vorrang vor automatischen Bewertungen.
Verlieren Bewerbende Punkte, wenn ich ein Item lösche, das sie beantwortet haben?
Ihre gespeicherte Antwort bleibt erhalten, aber ein entferntes Item nimmt nicht mehr an der Zusammenführung teil, sodass die Rollenpassung für alle ohne dieses Item neu berechnet wird. Das Löschen ist bei früh erkannten Fehlern unbedenklich; mitten in der Kohorte lassen Sie das Item besser stehen.
Warum konnte ich Live-Assessments früher nicht bearbeiten?
Frühere Versionen von SkillCort haben beim Veröffentlichen alle strukturellen Änderungen gesperrt. Die Sperre gilt nun nur noch dort, wo sie Ergebnisse tatsächlich schützt – bei geschlossenen und archivierten Assessments –, weil abgegebene Ergebnisse aus gespeicherten Bewertungen je Antwort berechnet werden und durch strukturelle Änderungen nicht verändert werden können.

Need a hand?

We'll help you set it up

Our team helps with setup, assessment design, and rollout — bring your questions to a live session.