What you'll need
- Item pronti nella sua libreria, organizzati in cartelle con tag
- Una durata complessiva obiettivo concordata con gli stakeholder
- Una mappa di massima di argomenti o fasce di difficoltà da trasformare in sezioni
- Quindici minuti per sostenere il suo stesso esame in anteprima prima di pubblicare
Step 1: Pianifichi la struttura prima di aprire il builder
Gli esami di SkillCort sono costruiti come sezioni che contengono pagine che contengono blocchi. Le sezioni sono la sua unità organizzativa — di norma una per argomento o competenza — e i loro pesi di valutazione confluiscono nel punteggio finale di aderenza al ruolo. Le pagine sono ciò che il candidato vede una schermata alla volta, e i blocchi sono le singole domande o i singoli contenuti presenti su una pagina.
Abbozzi prima questa gerarchia sulla carta. Decida di quante sezioni ha bisogno, all'incirca quante pagine contiene ciascuna e quali pagine meritano un proprio limite di tempo. Un piano del tipo "tre sezioni, quattro pagine ciascuna, due minuti per pagina nella sezione due" richiede cinque minuti di scrittura e risparmia un'ora di ristrutturazione più avanti.
Step 2: Costruisca sezioni e pagine nel builder
Crei l'assessment e aggiunga le sue sezioni. All'interno di ciascuna sezione crei le pagine e le riempia di blocchi: importi item esistenti tramite la finestra di selezione, filtrando per cartella, tag o tipo di item e selezionandone più d'uno, oppure crei nuovi blocchi sul posto. Tenga le pagine digeribili: da tre a cinque domande collegate per pagina si leggono meglio di uno scorrimento infinito.
Imposti adesso il peso di valutazione di ciascuna sezione, non dopo la somministrazione. Se la sezione uno è conoscenza di base e la sezione tre è problem solving applicato, pesarle 20/30/50 dice al motore di valutazione — e poi al Decision Board — che cosa questo esame valorizza davvero.
Step 3: Imposti il limite di tempo complessivo
Il limite di tempo complessivo per assessment è il budget generale: quando finisce, il tentativo si chiude indipendentemente da dove si trovi il candidato. Lo imposti su un ritmo realistico, non sull'ottimismo: sostenga lei stesso l'esame in anteprima, annoti il suo tempo e aggiunga un margine comodo, dato che i candidati leggono domande che non conoscono più lentamente dell'autore.
Resista alla tentazione di far svolgere al limite complessivo anche il ruolo di controllo dell'integrità. Il suo compito è mantenere l'esame proporzionato e confrontabile tra i candidati. Se la preoccupa che i candidati cerchino le risposte, quella è una conversazione sulle impostazioni di somministrazione, non un motivo per togliere a tutti il tempo di lettura.
Step 4: Aggiunga limiti di tempo per pagina dove il ritmo conta
I limiti di tempo per pagina sono più rigidi e più locali: quando il tempo di una pagina scade, il candidato viene spostato automaticamente alla pagina successiva e la pagina scaduta si blocca — non può tornarci. È esattamente ciò che serve quando una pagina successiva rivelerebbe la risposta a una precedente, o quando lavorare sotto pressione di tempo è esso stesso parte di ciò che sta misurando.
Poiché la scadenza non è negoziabile per il candidato, usi i limiti per pagina con intenzione e li dichiari. Indichi nelle istruzioni al candidato quali pagine sono cronometrate singolarmente e che cosa succede alla scadenza. Un candidato colto di sorpresa da una pagina che si blocca ha un motivo legittimo di lamentela; un candidato avvisato in anticipo è stato semplicemente testato.
- Usi i limiti per pagina quando c'è il rischio che le risposte trapelino tra pagine
- Li usi quando la rapidità sotto pressione è un requisito reale del lavoro
- Li eviti nelle pagine con lunghi brani di lettura o con stimoli complessi
- Li annunci sempre nelle istruzioni al candidato
Step 5: Configuri lo shuffle su tre livelli
SkillCort può mescolare a livello di sezione, pagina e blocco, e ogni shuffle ha un seed per tentativo: ogni candidato riceve un unico ordine coerente per tutto il suo tentativo, ma candidati diversi ricevono ordini diversi. Questo rende molto meno utile lo scambio di risposte tra vicini di posto senza rendere caotica l'esperienza di alcun singolo candidato.
Mescoli quasi sempre i blocchi all'interno delle pagine; mescoli le pagine all'interno di una sezione quando le pagine sono indipendenti; mescoli le sezioni solo se non è prevista una progressione di difficoltà. Se il suo esame riscalda deliberatamente prima del materiale difficile, mantenga fisso l'ordine delle sezioni e mescoli invece al loro interno.
Step 6: Scriva istruzioni per il candidato che eliminino le sorprese
Usi il campo delle istruzioni al candidato per dichiarare il tempo complessivo, quali pagine hanno un proprio limite, se le pagine bloccate possono essere rivisitate (non possono) e che cosa succede quando il tempo scade. I candidati rendono più vicino alla loro reale capacità quando le regole sono esplicite, e regole trasparenti sono anche più facili da difendere se un risultato viene messo in discussione.
Tenga le istruzioni brevi e fattuali. Tre o quattro frasi su tempo, navigazione e numero di domande battono un muro di testo dal tono legale che nessuno legge. Se la somministrazione userà un qualche monitoraggio, i candidati vedranno in più la schermata di consenso prima di iniziare: le istruzioni e la schermata devono raccontare la stessa storia.
Step 7: Faccia l'anteprima come candidato, poi pubblichi
Clicchi "Preview as candidate" nell'intestazione del builder e sostenga l'intero esame a un ritmo realistico. Sta verificando tre cose: se il limite complessivo lascia un margine sensato, se un qualche limite per pagina è tanto stretto da penalizzare chi legge con attenzione e se gli ordini mescolati producono mai una pagina che presuppone un contesto proveniente da una pagina che potrebbe venire dopo.
Corregga ciò che trova, rifaccia l'anteprima e poi pubblichi. La checklist di pubblicazione blocca Publish finché la configurazione necessaria non è completa, quindi tratti ogni voce irrisolta come una lacuna reale anziché come una formalità. Dopo la pubblicazione, crei la somministrazione con il suo nome e la sua finestra temporale e invii gli inviti.
Pro tips
- Si cronometri in anteprima e moltiplichi grosso modo per 1,5 o 2 per ottenere il limite del candidato: gli autori leggono sempre più in fretta le proprie domande.
- Metta la sezione più difficile al centro, non in fondo, così la pressione del tempo non ne deprime sistematicamente i punteggi.
- Se due domande devono comparire in un ordine fisso, le metta nella stessa pagina e lasci i blocchi di quella pagina senza shuffle.
- I limiti per pagina più un limite complessivo generoso di solito battono un unico limite complessivo stretto: il ritmo resta controllato senza uno strapiombo finale.
- Rifaccia l'anteprima dopo ogni modifica strutturale; una pagina spostata può rompere in silenzio un presupposto sull'ordine.