Wie die Rollenpassung berechnet wird
Die Zusammenführung folgt einer festen Kette. Zuerst werden innerhalb jedes Rubrikkriteriums die Bewertungen aller Prüfenden gemittelt, die dieses Kriterium bewertet haben. Anschließend werden die Kriteriumsmittelwerte gemäß den Kriteriumsgewichten der Rubrik zu einer Aufgabenbewertung kombiniert. Die Aufgabenbewertungen werden dann zu den Kompetenzen zusammengeführt, die sie messen.
Zuletzt wird der Beitrag jeder Kompetenz mit ihrem Kompetenzgewicht multipliziert mit ihrem Abschnittsgewicht gewichtet, und der Prozentwert der Rollenpassung ergibt sich aus dieser gewichteten Zusammenführung. Da jeder Schritt deterministisch ist, ergeben dieselben Nachweise immer denselben Wert der Rollenpassung.
Rubrikbewertungen haben Vorrang vor automatischen Bewertungen
Manche Aufgaben tragen sowohl eine automatische Bewertung (zum Beispiel aus dem Antwortschlüssel einer Multiple-Choice-Frage) als auch eine von Prüfenden eingegebene Rubrikbewertung. Wenn für dieselbe Aufgabe beide vorliegen, gilt die Rubrikbewertung und wird in der Zusammenführung verwendet.
Eine verwandte Regel sollten Sie im Kopf behalten: Ein Item ohne Antwortschlüssel wird automatisch als null bewertet, was bedeutet, dass es eine manuelle Prüfung braucht. Ein null wird nie als Null behandelt, sodass ungeprüfte Antworten die Rollenpassung einer bewerbenden Person nicht unbemerkt nach unten ziehen können.
Wo Sie die Gewichte festlegen
Gewichte liegen an zwei Stellen im Builder. Kriteriumsgewichte werden im Rubrikeditor gesetzt: Jedes Kriterium trägt einen Multiplikator (geschrieben als ×N), der steuert, wie stark es innerhalb seiner Aufgabe zählt. Abschnittsgewichte werden je Abschnitt gesetzt – öffnen Sie das Bearbeitungsformular des Abschnitts im Struktureditor und legen Sie dort das Scoring weight fest. Das Panel Scoring & reporting fasst die Gewichte anschließend schreibgeschützt zusammen, zusammen mit der Anzahl automatischer, rubrikbasierter und manueller Bewertungen im gesamten Assessment.
Gewichte sind sowohl in Assessments im Entwurf als auch in Live-Assessments bearbeitbar. Da die Rollenpassung aus gespeicherten Bewertungen mit den aktuellen Gewichten berechnet wird, aggregiert eine Änderung eines Gewichts in einem Live-Assessment die Rollenpassung für alle Bewerbenden neu, auch für jene, die bereits abgegeben haben – die Rohbewertungen ändern sich nie, aber die Prozentwerte verschieben sich. Bei Assessments, die mit einem Rollenprofil verknüpft sind, behalten erfasste Entscheidungen einen Snapshot der Rollenpassung zum Entscheidungszeitpunkt. Geschlossene und archivierte Assessments sind gesperrt; duplizieren Sie sie in einen neuen Entwurf, um sie zu ändern.
- Kriteriumsgewichte: Rubrikeditor, je Kriterium (×N).
- Abschnittsgewichte: das Bearbeitungsformular jedes Abschnitts im Struktureditor; zusammengefasst in Scoring & reporting.
- Änderungen an Gewichten in einem Live-Assessment aggregieren die Rollenpassung für alle neu; die Rohbewertungen ändern sich nie.
Wo Gewichte in Berichten auftauchen
Bewerbende und Prüfende können sehen, dass gewichtet wurde. Im Nachweisbericht für eine bewerbende Person werden Aufgaben nach Abschnitt gruppiert, sobald das Assessment mehrere Abschnitte oder Gewichte hat, jede individuell gewichtete Gruppe trägt ein ×N-Gewichtungskennzeichen, und ein Hinweis auf die gewichtete Bewertung erklärt, dass Bewertungen nach Gewicht kombiniert und nicht flach gemittelt wurden. Auch das Audit-Paket hält Abschnittsgewichte, Kriteriumsgewichte der Rubrik und Kompetenzzuordnungen fest, zusammen mit einer Methodik in klarer Sprache.
At a glance
- Innerhalb eines Kriteriums werden die Bewertungen der Prüfenden gemittelt; Kriterien werden über Rubrikgewichte kombiniert.
- Aufgabenbewertungen werden zu Kompetenzen zusammengeführt; jede Kompetenz trägt mit Kompetenzgewicht mal Abschnittsgewicht bei.
- Die Rollenpassung in Prozent ist das Ergebnis dieser gewichteten Zusammenführung.
- Hat eine Aufgabe sowohl eine Rubrikbewertung als auch eine automatische Bewertung, gilt die Rubrik.
- Gewichte erscheinen als Kennzeichen in den Nachweisberichten für Bewerbende, zusammen mit einem Hinweis auf die gewichtete Bewertung.