Ir para o conteúdo
SkillCort

8 min · 7 stepsTutorial de aplicação

Como criar um exame online cronometrado e dividido em secções

Um exame com bom ritmo mede capacidade; um exame com mau ritmo mede velocidade de escrita e pânico. Este tutorial mostra como estruturar um exame online na SkillCort usando secções, páginas e blocos, como os limites de tempo totais e por página interagem e como usar o baralhamento a três níveis para que todos os candidatos tenham uma experiência justa mas distinta. No fim, vai pré-visualizar o exame exatamente como o candidato o vê.

What you'll need

  • Itens prontos na sua biblioteca, organizados em pastas com etiquetas
  • Uma duração total alvo acordada com as partes interessadas
  • Um mapa aproximado de temas ou escalões de dificuldade para se tornarem secções
  • Quinze minutos para fazer o seu próprio exame em pré-visualização antes de publicar

Step 1: Planeie a estrutura antes de abrir o builder

Os exames da SkillCort são construídos como secções que contêm páginas que contêm blocos. As secções são a sua unidade de organização — tipicamente uma por tema ou competência — e os seus pesos de pontuação entram na pontuação final de adequação à função. As páginas são o que o candidato vê, um ecrã de cada vez, e os blocos são as perguntas ou os conteúdos individuais de uma página.

Esboce primeiro esta hierarquia no papel. Decida de quantas secções precisa, aproximadamente quantas páginas contém cada uma e que páginas merecem um limite de tempo próprio. Um plano de «três secções, quatro páginas cada, dois minutos por página na secção dois» leva cinco minutos a escrever e poupa uma hora de reestruturação mais tarde.

Step 2: Construa secções e páginas no builder

Crie a avaliação e acrescente as suas secções. Dentro de cada secção, crie páginas e encha-as de blocos — importe itens existentes através da janela de seleção, filtrando por pasta, etiqueta ou tipo de item e selecionando vários, ou crie novos blocos no próprio sítio. Mantenha as páginas digeríveis: três a cinco perguntas relacionadas por página leem-se melhor do que um desfile interminável.

Defina agora o peso de pontuação de cada secção, e não depois da aplicação. Se a secção um é conhecimento de base e a secção três é resolução aplicada de problemas, ponderá-las 20/30/50 diz ao motor de pontuação — e depois ao Decision Board — o que este exame valoriza de facto.

Step 3: Defina o limite de tempo total

O limite de tempo total por avaliação é o orçamento global: quando se esgota, a tentativa termina independentemente de onde o candidato esteja. Defina-o a partir de um ritmo realista e não de otimismo — faça você mesmo o exame em pré-visualização, anote o seu tempo e acrescente uma folga confortável, já que os candidatos leem perguntas desconhecidas mais devagar do que o autor.

Resista à tentação de fazer o limite total servir também de controlo de integridade. A sua função é manter o exame proporcional e comparável entre candidatos. Se está preocupado com candidatos a irem procurar coisas, isso é uma conversa sobre as definições de aplicação, não uma razão para tirar tempo de leitura a toda a gente.

Step 4: Acrescente limites de tempo por página onde o ritmo importa

Os limites de tempo por página são mais estritos e mais locais: quando o tempo de uma página expira, o candidato é automaticamente encaminhado para a página seguinte e a página expirada fica bloqueada — não pode voltar a ela. É exatamente isto que quer quando uma página posterior revelaria a resposta a uma anterior, ou quando trabalhar sob pressão de tempo faz parte do que está a medir.

Como a expiração não é negociável para o candidato, use os limites por página de forma deliberada e comunique-os. Indique nas instruções ao candidato que páginas são cronometradas individualmente e o que acontece na expiração. Um candidato apanhado de surpresa por uma página que bloqueia tem uma queixa legítima; um candidato que foi avisado de antemão foi simplesmente testado.

  • Use limites por página quando houver risco de fuga de respostas entre páginas
  • Use-os quando a rapidez sob pressão for um requisito genuíno do trabalho
  • Dispense-os em páginas com passagens de leitura longas ou estímulos complexos
  • Anuncie-os sempre nas instruções ao candidato

Step 5: Configure o baralhamento a três níveis

A SkillCort pode baralhar ao nível da secção, da página e do bloco, e cada baralhamento tem uma semente por tentativa — cada candidato recebe uma ordem consistente para toda a sua tentativa, mas candidatos diferentes recebem ordens diferentes. Isto torna a partilha de respostas lado a lado muito menos útil, sem tornar caótica a experiência de qualquer candidato individual.

Baralhe quase sempre os blocos dentro das páginas; baralhe as páginas dentro de uma secção quando as páginas forem independentes; baralhe as secções apenas se não houver uma progressão de dificuldade pretendida. Se o seu exame aquece deliberadamente antes do material difícil, mantenha a ordem das secções fixa e baralhe antes lá dentro.

Step 6: Escreva instruções ao candidato que eliminem surpresas

Use o campo de instruções ao candidato para indicar o tempo total, que páginas têm limites próprios, se as páginas bloqueadas podem ser revisitadas (não podem) e o que acontece quando o tempo expira. Os candidatos aproximam-se mais da sua capacidade real quando as regras são explícitas, e as regras transparentes também são mais fáceis de defender se um resultado alguma vez for questionado.

Mantenha as instruções curtas e factuais. Três ou quatro frases a cobrir tempo, navegação e número de perguntas valem mais do que um muro de texto com ar jurídico que ninguém lê. Se a aplicação usar alguma monitorização, os candidatos verão além disso o ecrã de consentimento antes de começar — as instruções e esse ecrã devem contar a mesma história.

Step 7: Pré-visualize como candidato e depois publique

Clique em "Preview as candidate" no cabeçalho do builder e faça o exame inteiro a um ritmo realista. Está a verificar três coisas: se o limite total deixa uma folga sensata, se algum limite por página é apertado ao ponto de penalizar quem lê com cuidado e se as ordens baralhadas alguma vez produzem uma página que pressuponha contexto de uma página que pode vir depois.

Corrija o que encontrar, pré-visualize outra vez e depois publique. A lista de verificação de publicação bloqueia Publish até a configuração obrigatória estar completa, por isso trate qualquer item por resolver como uma lacuna a sério e não como uma formalidade. Depois de publicar, crie a aplicação com o seu nome e janela temporal e envie os convites.

Pro tips

  • Cronometre-se na pré-visualização e multiplique por cerca de 1,5 a 2 para o limite do candidato — os autores leem sempre mais depressa as suas próprias perguntas.
  • Coloque a secção mais difícil a meio, não no fim, para que a pressão do tempo não deprima sistematicamente as suas pontuações.
  • Se duas perguntas têm de aparecer por uma ordem fixa, coloque-as na mesma página e deixe os blocos dessa página sem baralhar.
  • Limites por página mais um limite total generoso costumam valer mais do que um único limite total apertado — o ritmo mantém-se controlado sem um precipício no fim.
  • Volte a fazer a pré-visualização depois de qualquer alteração estrutural; uma página movida pode quebrar silenciosamente um pressuposto de ordenação.

Perguntas frequentes

O que vê o candidato quando o tempo de uma página expira?
É encaminhado automaticamente para a página seguinte e a página expirada fica bloqueada — não pode navegar de volta para ela. Tudo o que tiver introduzido nessa página até esse momento é guardado. É por isto que os limites por página devem ser sempre anunciados nas instruções.
Os limites de tempo totais e por página entram em conflito?
Não — sobrepõem-se. O limite total limita a tentativa inteira; os limites por página limitam páginas individuais dentro dela. Um candidato pode ficar sem tempo de página com muito tempo total ainda disponível, e o limite total continua a terminar a tentativa onde quer que ele esteja quando expirar.
O baralhamento torna o exame injusto para alguns candidatos?
O baralhamento tem uma semente por tentativa, pelo que cada candidato vive uma ordem estável e coerente. Só surgem problemas de justiça se a dificuldade das perguntas depender da ordem — que é exatamente para isso que serve a pré-visualização de candidato. Se tiver uma progressão de dificuldade deliberada, mantenha a ordem das secções fixa.
Os candidatos podem voltar a páginas anteriores?
Podem navegar dentro das regras que definir, mas qualquer página cujo limite de tempo individual tenha expirado fica bloqueada para o resto da tentativa. Se a revisitação livre é importante no seu exame, use o limite de tempo total para o ritmo geral e aplique limites por página apenas onde houver risco de fuga.
Como é que os pesos das secções afetam a pontuação final?
O peso de pontuação de cada secção determina o seu contributo para a pontuação ponderada de adequação à função mostrada no Decision Board. Os pesos são definidos no builder, por isso decida-os antes da aplicação — codificam o que o exame valoriza, e os avaliadores e as partes interessadas conseguem ver esse raciocínio.

For hiring teams

Veja o ritmo de exame bem feito

Marque uma demonstração e estruturamos um dos seus exames reais — secções, tempos e baralhamento — e percorremo-lo juntos na pré-visualização de candidato.