Cómo diseñar una rúbrica de puntuación

What you'll need

• Una imagen clara de las competencias del puesto (un perfil de puesto ayuda)
• La tarea de prueba de trabajo que puntuará la rúbrica, en forma casi definitiva
• 2–3 respuestas de muestra, reales o redactadas, de distintos niveles de calidad
• Aportaciones de alguien que hace o dirige el trabajo real

Step 1: Derive los criterios del puesto, no de la tarea

Empiece por la pregunta que la evaluación existe para responder: ¿de qué competencias depende realmente este puesto? Cada criterio de la rúbrica debería poder rastrearse hasta una de ellas. Si parte de la tarea, acabará puntuando características incidentales del entregable — formato, extensión, elección de herramienta — en lugar de la habilidad que la tarea se construyó para revelar.

Mantenga la lista corta. De tres a seis criterios por rúbrica suele ser lo adecuado: suficientes para separar habilidades distintas, pocos como para que los evaluadores puedan tenerlos todos en mente mientras leen una sola respuesta. Si dos criterios parecen subir y bajar siempre juntos, fusiónelos; si un criterio esconde dos juicios independientes, divídalo.

Step 2: Escriba conductas observables, no rasgos

"Buen comunicador" es un rasgo; "reconoce el problema del cliente antes de proponer una solución y termina con un siguiente paso concreto" es una conducta que un evaluador puede señalar en la respuesta. Cada criterio debería estar formulado de modo que dos personas que leen la misma respuesta miren la misma evidencia para puntuarla.

Una prueba útil: para cada criterio, pregúntese "¿qué subrayaría en una respuesta para justificar esta puntuación?". Si la respuesta es una sensación y no una frase, una decisión o un artefacto en el resultado del candidato, reescriba el criterio hasta que nombre lo observable.

• Sustituya los adjetivos sobre la persona por verbos sobre el trabajo
• Nombre el artefacto: ¿qué elemento de la respuesta lo demuestra?
• Evite criterios que exijan adivinar intenciones o personalidad
• Un criterio, un juicio — nada de híbridos tipo "claridad y exactitud"

Step 3: Elija entre la entrada de puntuación clásica y una matriz por niveles

SkillCort admite dos estilos de rúbrica. La entrada de puntuación clásica da a los evaluadores una escala numérica por criterio — rápida y familiar, pero se apoya en la idea privada que cada evaluador tiene de lo que significa un 7. La matriz por niveles define niveles explícitos por criterio, cada uno con una descripción anclada de la conducta que lo merece, y los evaluadores puntúan haciendo clic en la tarjeta del nivel que corresponde a la respuesta.

Para cualquier cosa con varios evaluadores o con consecuencias reales, prefiera la matriz. Las descripciones ancladas hacen el trabajo de calibración por adelantado: en lugar de que cada revisor invente su propia escala, todos comparan las respuestas con el mismo estándar escrito. La entrada clásica sigue siendo razonable para puntuaciones de bajo impacto con un solo evaluador.

Step 4: Ancle cada nivel en descripciones concretas y distinguibles

En el editor de matriz, escriba una descripción para cada celda — cada criterio en cada nivel. Los buenos anclajes describen lo que hace realmente una respuesta de ese nivel: qué incluye una respuesta excelente, qué acierta y qué se le escapa a una aceptable, qué deja de hacer una débil. Las gradaciones vagas como "bien", "muy bien", "excelente" empujan a los evaluadores de vuelta al juicio privado, que es justo lo que la matriz trata de evitar.

Haga que los niveles contiguos sean realmente distinguibles. La prueba es una respuesta límite: si un evaluador que lee sus anclajes pudiera defender igual de bien dos niveles vecinos, afine la diferencia — normalmente nombrando la única conducta que los separa. De tres a cinco niveles por criterio suele bastar; más niveles implican distinciones más finas de las que la evidencia puede sostener.

Step 5: Pondere los criterios para que reflejen lo que el puesto premia

No todos los criterios merecen la misma voz. SkillCort le permite ponderar cada criterio (×N), y esos pesos fluyen directamente hacia la puntuación de la tarea y de ahí hacia el ajuste al puesto. Pondere por encima los criterios de los que más depende el puesto — la decisión de criterio, la calidad de la respuesta escrita — frente a otros de apoyo como el formato o la exhaustividad.

Sea deliberado aquí, porque los pesos son el punto en el que una rúbrica codifica en silencio su filosofía de contratación. Una rúbrica que pondera el pulido por encima del criterio sacará a la superficie candidatos pulidos. Contraste los pesos con alguien cercano al puesto: "si un candidato bordara el criterio A pero fallara el criterio B, ¿seguiríamos interesados?". Los pesos deberían coincidir con la respuesta.

Step 6: Decida si los candidatos deben ver la rúbrica

SkillCort puede hacer visible una rúbrica para el candidato. Mostrarla les dice qué aspecto tiene lo bueno, lo cual es honesto y tiende a producir respuestas que abordan lo que de verdad le importa — está evaluando la habilidad, no la capacidad de adivinar sus criterios. Ocultarla tiene sentido cuando conocer los criterios haría trivial guionizar la respuesta, como ocurre en algunos escenarios de criterio.

Elija lo que elija, elíjalo para cada rúbrica y a propósito. Una rúbrica visible eleva el listón de su redacción de anclajes, ya que los candidatos también la leerán — una razón más para que el lenguaje concreto y conductual importe. También transmite equidad: los candidatos que conocen el estándar viven la evaluación como una valoración de su trabajo y no como un juego de adivinanzas sobre sus preferencias.

Step 7: Pruebe la rúbrica con respuestas de muestra antes de adjuntarla

Tome sus dos o tres respuestas de muestra y puntúelas con el borrador de rúbrica — idealmente con una segunda persona puntuando de forma independiente. Está probando la rúbrica, no las respuestas: ¿los anclajes sitúan cada respuesta en un nivel de forma limpia, o ambos dudaron en la misma celda? La duda señala el anclaje que hay que reescribir.

Compruebe también la aritmética. Con los pesos aplicados, ¿la respuesta fuerte supera cómodamente a la débil, y por un margen que parece correcto? Si una respuesta mediocre puntúa casi tan alto como una excelente, o los anclajes no están separando la calidad o algún peso está mal puesto.

Step 8: Adjunte la rúbrica y entienda la instantánea

Cuando adjunta una rúbrica a una evaluación, esta queda congelada en una instantánea. Las ediciones posteriores de la rúbrica en su banco nunca cambian una evaluación en curso — todos los candidatos de esa evaluación se puntúan con exactamente el mismo estándar, que es precisamente lo que hace que las puntuaciones sean comparables y defendibles.

Esto significa que el momento previo a adjuntarla es su última oportunidad barata de corregir la redacción, los niveles o los pesos para esta evaluación. Siga mejorando la versión del banco a medida que aprende de las respuestas reales; esas mejoras beneficiarán a la siguiente evaluación que la adjunte, sin perturbar la que está en vuelo.