What you'll need
- Itens prontos na sua biblioteca, organizados em pastas com etiquetas
- Uma duração total alvo acordada com as partes interessadas
- Um mapa aproximado de temas ou escalões de dificuldade para se tornarem secções
- Quinze minutos para fazer o seu próprio exame em pré-visualização antes de publicar
Step 1: Planeie a estrutura antes de abrir o builder
Os exames da SkillCort são construídos como secções que contêm páginas que contêm blocos. As secções são a sua unidade de organização — tipicamente uma por tema ou competência — e os seus pesos de pontuação entram na pontuação final de adequação à função. As páginas são o que o candidato vê, um ecrã de cada vez, e os blocos são as perguntas ou os conteúdos individuais de uma página.
Esboce primeiro esta hierarquia no papel. Decida de quantas secções precisa, aproximadamente quantas páginas contém cada uma e que páginas merecem um limite de tempo próprio. Um plano de «três secções, quatro páginas cada, dois minutos por página na secção dois» leva cinco minutos a escrever e poupa uma hora de reestruturação mais tarde.
Step 2: Construa secções e páginas no builder
Crie a avaliação e acrescente as suas secções. Dentro de cada secção, crie páginas e encha-as de blocos — importe itens existentes através da janela de seleção, filtrando por pasta, etiqueta ou tipo de item e selecionando vários, ou crie novos blocos no próprio sítio. Mantenha as páginas digeríveis: três a cinco perguntas relacionadas por página leem-se melhor do que um desfile interminável.
Defina agora o peso de pontuação de cada secção, e não depois da aplicação. Se a secção um é conhecimento de base e a secção três é resolução aplicada de problemas, ponderá-las 20/30/50 diz ao motor de pontuação — e depois ao Decision Board — o que este exame valoriza de facto.
Step 3: Defina o limite de tempo total
O limite de tempo total por avaliação é o orçamento global: quando se esgota, a tentativa termina independentemente de onde o candidato esteja. Defina-o a partir de um ritmo realista e não de otimismo — faça você mesmo o exame em pré-visualização, anote o seu tempo e acrescente uma folga confortável, já que os candidatos leem perguntas desconhecidas mais devagar do que o autor.
Resista à tentação de fazer o limite total servir também de controlo de integridade. A sua função é manter o exame proporcional e comparável entre candidatos. Se está preocupado com candidatos a irem procurar coisas, isso é uma conversa sobre as definições de aplicação, não uma razão para tirar tempo de leitura a toda a gente.
Step 4: Acrescente limites de tempo por página onde o ritmo importa
Os limites de tempo por página são mais estritos e mais locais: quando o tempo de uma página expira, o candidato é automaticamente encaminhado para a página seguinte e a página expirada fica bloqueada — não pode voltar a ela. É exatamente isto que quer quando uma página posterior revelaria a resposta a uma anterior, ou quando trabalhar sob pressão de tempo faz parte do que está a medir.
Como a expiração não é negociável para o candidato, use os limites por página de forma deliberada e comunique-os. Indique nas instruções ao candidato que páginas são cronometradas individualmente e o que acontece na expiração. Um candidato apanhado de surpresa por uma página que bloqueia tem uma queixa legítima; um candidato que foi avisado de antemão foi simplesmente testado.
- Use limites por página quando houver risco de fuga de respostas entre páginas
- Use-os quando a rapidez sob pressão for um requisito genuíno do trabalho
- Dispense-os em páginas com passagens de leitura longas ou estímulos complexos
- Anuncie-os sempre nas instruções ao candidato
Step 5: Configure o baralhamento a três níveis
A SkillCort pode baralhar ao nível da secção, da página e do bloco, e cada baralhamento tem uma semente por tentativa — cada candidato recebe uma ordem consistente para toda a sua tentativa, mas candidatos diferentes recebem ordens diferentes. Isto torna a partilha de respostas lado a lado muito menos útil, sem tornar caótica a experiência de qualquer candidato individual.
Baralhe quase sempre os blocos dentro das páginas; baralhe as páginas dentro de uma secção quando as páginas forem independentes; baralhe as secções apenas se não houver uma progressão de dificuldade pretendida. Se o seu exame aquece deliberadamente antes do material difícil, mantenha a ordem das secções fixa e baralhe antes lá dentro.
Step 6: Escreva instruções ao candidato que eliminem surpresas
Use o campo de instruções ao candidato para indicar o tempo total, que páginas têm limites próprios, se as páginas bloqueadas podem ser revisitadas (não podem) e o que acontece quando o tempo expira. Os candidatos aproximam-se mais da sua capacidade real quando as regras são explícitas, e as regras transparentes também são mais fáceis de defender se um resultado alguma vez for questionado.
Mantenha as instruções curtas e factuais. Três ou quatro frases a cobrir tempo, navegação e número de perguntas valem mais do que um muro de texto com ar jurídico que ninguém lê. Se a aplicação usar alguma monitorização, os candidatos verão além disso o ecrã de consentimento antes de começar — as instruções e esse ecrã devem contar a mesma história.
Step 7: Pré-visualize como candidato e depois publique
Clique em "Preview as candidate" no cabeçalho do builder e faça o exame inteiro a um ritmo realista. Está a verificar três coisas: se o limite total deixa uma folga sensata, se algum limite por página é apertado ao ponto de penalizar quem lê com cuidado e se as ordens baralhadas alguma vez produzem uma página que pressuponha contexto de uma página que pode vir depois.
Corrija o que encontrar, pré-visualize outra vez e depois publique. A lista de verificação de publicação bloqueia Publish até a configuração obrigatória estar completa, por isso trate qualquer item por resolver como uma lacuna a sério e não como uma formalidade. Depois de publicar, crie a aplicação com o seu nome e janela temporal e envie os convites.
Pro tips
- Cronometre-se na pré-visualização e multiplique por cerca de 1,5 a 2 para o limite do candidato — os autores leem sempre mais depressa as suas próprias perguntas.
- Coloque a secção mais difícil a meio, não no fim, para que a pressão do tempo não deprima sistematicamente as suas pontuações.
- Se duas perguntas têm de aparecer por uma ordem fixa, coloque-as na mesma página e deixe os blocos dessa página sem baralhar.
- Limites por página mais um limite total generoso costumam valer mais do que um único limite total apertado — o ritmo mantém-se controlado sem um precipício no fim.
- Volte a fazer a pré-visualização depois de qualquer alteração estrutural; uma página movida pode quebrar silenciosamente um pressuposto de ordenação.