What you'll need
- Un puesto que cubrir, con aportaciones de alguien que hace o dirige ese trabajo
- Un espacio de trabajo de SkillCort con permiso para construir y publicar
- Los evaluadores que puntuarán, con tiempo reservado para una sesión de calibración
- Su lista de candidatos, o el proceso que la producirá
- Acuerdo sobre quién es dueño de la decisión final
Step 1: Empiece por un perfil de puesto, no por una lista de preguntas
Antes de tocar la plataforma, escriba lo que el puesto realmente exige: el puñado de competencias que separan a quien prospera de quien sufre, y aproximadamente cómo se ordenan. Este perfil es la columna vertebral de todo lo que viene después — las tareas demuestran esas competencias, las rúbricas las puntúan, los pesos codifican su orden y el ajuste al puesto informa sobre ellas.
Manténgalo observable. "Gestiona peticiones ambiguas con buen criterio" puede convertirse en una tarea y en un criterio de rúbrica; "buen compañero de equipo" no. Si no puede imaginar la prueba de trabajo que revelaría una competencia, todavía no le corresponde estar en el perfil.
Step 2: Construya las tareas y las rúbricas en la biblioteca de ítems
En la biblioteca de ítems, cree las tareas que permiten a los candidatos demostrar cada competencia — organizadas en carpetas con etiquetas de ámbito de carpeta para que la siguiente evaluación pueda reutilizarlas. Empiece por las pruebas de trabajo: un ticket realista que responder, un caso que analizar, un archivo que producir. Los tipos de ítem de SkillCort cubren respuestas de texto y de texto enriquecido, subidas de archivos, código, entradas en tabla, grabación de audio y vídeo y más, con diseños de estímulo en paralelo para las tareas basadas en documentos.
Puede redactar manualmente, generar ítems con IA de forma masiva — hasta 100 por ejecución, opcionalmente anclados en sus propios documentos fuente — o pegar rápidamente preguntas de opción múltiple. Trate los borradores de la IA como borradores: revise y edite cada ítem generado antes de que llegue a un candidato.
Dé una rúbrica a toda tarea puntuada por juicio humano. Derive los criterios del perfil de puesto, ancle los niveles en conductas observables y pondere los criterios que más importan. El diseño de rúbricas es un oficio con su propio tutorial; lo innegociable aquí es que las rúbricas existan antes que las respuestas.
Step 3: Monte la evaluación en el builder
En el builder, estructure la evaluación como secciones, páginas y bloques — normalmente una sección por área de competencia, páginas que marcan el ritmo del trabajo y bloques que contienen los ítems que importa de su biblioteca, filtrados por carpeta, etiqueta o tipo. Fije un límite de tiempo total y límites por página que reflejen un ritmo de trabajo realista con margen para quien lee por primera vez.
Fije los pesos de puntuación de las secciones (×N) para reflejar el orden del perfil de puesto — esos pesos fluyen directamente hacia el ajuste al puesto, así que aquí es donde sus prioridades se vuelven aritmética. Si usa el orden aleatorio por equidad, el builder lo ofrece en tres niveles; mantenga las secuencias de pruebas de trabajo en un orden fijo y sensato allí donde el flujo importe.
Step 4: Vista previa, control de calidad y lista de comprobación de publicación
Use "Preview as candidate" desde la cabecera del builder y recorra cada página en escritorio y en un teléfono, respondiendo de verdad. Cronométrese frente a sus límites, verifique cada rúbrica y clave de respuesta contra la tarea tal como quedó redactada, y recuerde que una tarea sin clave de respuesta se puntúa automáticamente como null, es decir sin puntuación — marcada para revisión manual, no como un 0.
La lista de comprobación de publicación bloquea Publish hasta que la configuración obligatoria esté completa; complétela y después haga un piloto corto con uno o dos colegas en condiciones reales antes de invitar a ningún candidato. La rutina completa de control de calidad tiene su propio tutorial — no se la salte, porque un fallo que descubre un candidato cuesta una señal que ya no se puede recuperar.
Step 5: Configure la entrega con seguridad proporcional
Publique y después cree la entrega: un nombre, la ventana temporal en la que los candidatos pueden intentarlo y una seguridad proporcional a lo que está en juego. SkillCort ofrece bloqueo con límites de infracción opcionales, bloqueo de copiar y pegar, detección de segunda pantalla, grabación de cámara o de pantalla y comprobación de identidad — opciones independientes, no un paquete cerrado.
Proporcional es la palabra clave. Una prueba de trabajo de primera ronda rara vez justifica la grabación con cámara; un examen de certificación puede justificar la mayoría de las opciones. Los candidatos ven una pantalla de consentimiento y comprobación previa antes de empezar, de modo que todo lo que active queda comunicado y verificado de antemano — cada control que añade es fricción para los candidatos honestos, así que añada solo lo que lo que está en juego justifique.
Step 6: Invite a los candidatos y vigile la ventana
Envíe las invitaciones por correo electrónico desde la entrega. Alrededor de la invitación, fije expectativas en lenguaje claro: en qué consiste la evaluación, cuánto se tarda, que funciona mejor en un escritorio si alguna tarea lo requiere y que las respuestas las puntúan evaluadores humanos con una rúbrica coherente.
Durante la ventana, observe la finalización y no el rendimiento. Anime a quienes no han empezado antes de que se cierre la ventana, y anote cualquier evento de integridad para una revisión estructurada posterior — durante la entrega son observaciones en una línea de tiempo, no juicios. Resista la tentación de espiar las primeras respuestas para formarse una impresión; la puntuación empieza después de la calibración y con la rúbrica en la mano, o la rúbrica era puro teatro.
Step 7: Evalúe con un panel calibrado
Antes de empezar a puntuar, haga una sesión de calibración: los evaluadores puntúan de forma independiente dos o tres respuestas de referencia con la rúbrica compartida, comparan las diferencias por criterio y documentan las interpretaciones acordadas. Cuesta una hora y marca la diferencia entre puntuaciones comparables y puntuaciones que reflejan quién revisó a quién por casualidad. El formato de la sesión tiene su propio tutorial.
Después, puntúe. En la matriz por niveles, los evaluadores hacen clic en la tarjeta del nivel cuya descripción anclada se corresponde con la respuesta y adjuntan notas como evidencia. La IA puede redactar resúmenes y sugerencias a nivel de criterio — a partir de respuestas o de transcripciones de entrevista, con registro del modelo y su versión — pero una persona con nombre confirma o corrige cada puntuación. Cuando hay varios evaluadores, se promedian dentro de cada criterio antes de que los pesos combinen nada.
- Calibre antes de que se abra la ventana de revisión, no a mitad de camino
- Adjunte una nota de evidencia a cada puntuación de criterio
- Derive sin demora a revisión manual las puntuaciones automáticas null (sin clave de respuesta)
- Haga una comprobación de deriva con una repuntuación ciega si la ventana dura semanas
Step 8: Decida en el Decision Board y exporte el paquete de auditoría
En el Decision Board, lea el ajuste al puesto como un punto de partida ponderado: refleja sus pesos de criterio, de habilidad y de sección, y ordena su atención. Compare a los finalistas competencia por competencia, baje desde cualquier puntuación hasta la evidencia subyacente — resultados de las tareas, notas de rúbrica, la línea de tiempo de integridad — y resuelva las señales de riesgo como contexto para la revisión humana, nunca como rechazos automáticos. Leer bien el tablero tiene su propio tutorial.
Registre la decisión con su razonamiento y después exporte los artefactos: un informe de evidencia del candidato en marca blanca para las conversaciones con las partes interesadas, y el paquete de auditoría como registro duradero — un único archivo autocontenido con la estructura y los pesos de la evaluación, las versiones de rúbrica, cada puntuación con su evaluador nombrado y su marca de tiempo, la metodología en lenguaje claro, la procedencia de la IA, las resoluciones de integridad y el registro de decisiones.
Ese archivo es el sentido de todo el ejercicio. No solo ha ordenado a los candidatos; ha producido una decisión que puede explicar — a una parte interesada, a un auditor o a un candidato que pregunte cómo se tomó.
Pro tips
- Acote el tiempo de la primera vuelta: una evaluación enfocada lanzada esta semana supera a una exhaustiva lanzada el mes que viene, y la biblioteca hace que la segunda vuelta sea muchísimo más rápida.
- Deje que el perfil de puesto discipline el alcance — cada tarea, criterio y peso debe poder rastrearse hasta una competencia, o estará midiendo algo que usted no eligió.
- Reutilice de forma deliberada: las carpetas y etiquetas de la biblioteca de ítems convierten esta evaluación en el punto de partida del siguiente puesto de la familia.
- Mantenga el tiempo total del candidato proporcional a la etapa — una evaluación larga filtra por tiempo libre, no por habilidad.
- Haga una retrospectiva después de la primera cohorte: qué tareas separaron a los candidatos, qué anclajes de la rúbrica causaron dudas, qué controles de seguridad merecieron la fricción que introdujeron.