What you'll need
- Uma norma de certificação documentada: que competências atesta e a que nível
- Um critério de aprovação acordado antes de qualquer candidato fazer o exame
- Um banco de itens suficientemente grande para suportar variação entre tentativas
- Aprovação do responsável pelo programa sobre que medidas de supervisão o risco justifica
Step 1: Defina primeiro a norma e os critérios de aprovação
Escreva o que o certificado atesta antes de construir seja o que for: as competências abrangidas, o nível de desempenho exigido e o critério de aprovação. Decida já se a aprovação significa um limiar global, um mínimo em todas as secções, ou ambos. Uma linha de aprovação traçada depois de ver os resultados é indefensável; uma documentada de antemão é uma norma.
Faça corresponder cada competência a uma secção com um peso de pontuação explícito. Os pesos entram na pontuação final, pelo que fazem parte da própria norma — um certificado em que os «procedimentos de segurança» valem 10% da pontuação atesta algo diferente de um em que valem 40%. Registe a fundamentação ao lado dos pesos.
Step 2: Construa um banco de itens em reserva na biblioteca
Crie uma pasta dedicada à certificação, com etiquetas próprias da pasta por competência e por escalão de dificuldade. Redija manualmente os itens mais subtis, cole rapidamente as perguntas de escolha múltipla que já tem e use a geração por IA — com o seu programa curricular ou material de formação carregado como documento de fundamentação — para esboçar amplitude, até 100 itens por execução.
Trate os itens gerados por IA como rascunhos, não como perguntas acabadas. Reveja cada um quanto ao rigor, à existência de uma única resposta correta defensável e ao alinhamento com a norma antes de entrar no banco. Numa certificação, um item mau não é apenas ruído — é um resultado de que alguém pode legitimamente recorrer.
Step 3: Monte o exame com baralhamento com semente como formas paralelas
Estruture o exame em secções, páginas e blocos que correspondam ao seu mapa de competências, importando os itens do banco através da janela de seleção com filtros de pasta, etiqueta e tipo. Depois ative o baralhamento aos níveis de secção, página e bloco conforme o seu desenho permitir — cada tentativa recebe a sua própria ordem gerada por semente, pelo que não há dois candidatos com uma sequência idêntica.
É assim que se obtêm formas paralelas sem manter documentos de exame separados: o conteúdo e a dificuldade mantêm-se constantes, a ordenação varia por tentativa e a semente torna a experiência de cada candidato internamente consistente. As chaves de resposta passadas entre candidatos perdem quase todo o valor quando a posição já não identifica a pergunta.
Step 4: Defina limites de tempo estritos e comunicados
Defina um limite de tempo total derivado de ensaios cronometrados, não de palpites — use "Preview as candidate" para cronometrar você mesmo uma tentativa completa e acrescente uma folga medida. Numa certificação, o limite tem de ser idêntico para todos os candidatos de uma coorte; a comparabilidade faz parte do que torna o resultado significativo.
Acrescente limites de tempo por página onde o material posterior possa revelar respostas anteriores ou onde o desempenho cronometrado faça parte da norma. Lembre-se da mecânica: quando o tempo de uma página expira, o candidato é encaminhado para a seguinte e a página fica bloqueada. Indique o limite total, os limites por página e o comportamento de bloqueio de forma explícita nas instruções ao candidato.
Step 5: Configure a supervisão de forma proporcional ao risco
Nas definições de aplicação, aumente a segurança de forma a corresponder ao valor do certificado. Para uma credencial genuína, isso significa normalmente bloqueio de ecrã inteiro com limites de infrações, bloqueio de copiar/colar, deteção de segundo ecrã — que impede o início se for detetado um monitor adicional e sinaliza ligações a meio do exame —, gravação de webcam, gravação de ecrã e uma verificação de identidade. O Safe Exam Browser está disponível quando você controla as máquinas.
Configure deliberadamente os limites de infrações do bloqueio: número máximo de infrações, segundos permitidos por saída e total de segundos fora do ecrã inteiro. Ultrapassar um limite força a submissão da tentativa com um evento de auditoria — é um limite configurado de que o candidato foi informado, não um veredicto. Uma pessoa continua a rever a tentativa e as suas evidências antes de ser tomada qualquer decisão sobre o resultado.
- Bloqueio de ecrã inteiro com limites de infrações explícitos (contagem, segundos por saída, total de segundos)
- Bloqueio de copiar/colar e deteção de segundo ecrã
- Gravação de webcam e de ecrã para revisão, não para juízo automático
- Verificação de identidade para ligar a tentativa à pessoa
- Safe Exam Browser para ambientes totalmente geridos
Step 6: Seja transparente no ecrã de consentimento
Todos os candidatos passam por um ecrã de consentimento e de verificação prévia antes de começar, e esse ecrã indica exatamente o que é monitorizado: gravações, regras de bloqueio, limites de infrações e verificação de identidade. Não suavize nem esconda esta informação. Os candidatos que conhecem as regras podem consentir de forma esclarecida, preparar corretamente o seu ambiente e não podem depois alegar que foram monitorizados às escondidas.
A verificação prévia também protege a qualidade dos seus dados — as verificações de câmara, microfone e ecrã acontecem antes de o relógio começar, pelo que as falhas técnicas surgem como problemas de configuração resolúveis e não como sinalizações de integridade a meio do exame. Um ecrã transparente não é uma cortesia acrescentada a um exame defensável; é parte do que torna o exame defensável.
Step 7: Pontue todas as tentativas segundo a mesma norma
Para itens de resposta aberta, associe grelhas antes da aplicação — cada grelha congela num instantâneo ao ser associada, pelo que todos os candidatos da coorte são medidos literalmente pelos mesmos critérios, mesmo que refine a grelha para o ciclo seguinte. Use descrições de nível ancoradas para que avaliadores diferentes cheguem à mesma pontuação para o mesmo desempenho.
A IA pode esboçar resumos e sugestões de pontuação ao nível do critério, com o modelo e a versão registados, mas é uma pessoa identificada pelo nome que confirma cada pontuação. Aplique o critério de aprovação documentado no primeiro passo de forma mecânica e idêntica a todas as tentativas. Quaisquer sinalizações de integridade da aplicação são revistas por uma pessoa juntamente com o trabalho substantivo — uma sinalização é contexto para uma decisão, nunca a própria decisão.
Step 8: Exporte o pacote de auditoria como registo
Para cada candidato certificado — ou recusado —, a exportação do pacote de auditoria reúne o registo defensável: o que lhe foi pedido, o que submeteu, os instantâneos das grelhas e as pontuações confirmadas, as identidades dos avaliadores, os eventos de integridade com os respetivos limiares configurados e os registos de modelo e versão de IA de quaisquer sugestões utilizadas. É isto que apresenta quando há recurso de um resultado ou quando um regulador pergunta como foi obtido o certificado.
Combine-o com o relatório de evidências do candidato — imprimível, pronto para PDF e white-label — para o lado voltado ao candidato. Arquive o pacote de auditoria por coorte por rotina, não apenas quando for contestado; um registo reunido no momento da decisão vale muito mais do que um reconstituído um ano depois.
Pro tips
- Teste o exame completo com pessoal interno nas condições reais de aplicação antes da primeira coorte — as más configurações de supervisão só aparecem sob supervisão.
- Dimensione os limites de infrações para pessoas, não para ideais: um alerta de notificação ou um gesto acidental devem consumir orçamento, não terminar uma tentativa.
- Mantenha o banco de itens a crescer entre coortes e retire os itens que sejam divulgados ou tenham mau desempenho; um banco estático degrada-se.
- Documente o critério de aprovação e os pesos das secções nos registos do seu programa, não apenas na plataforma — os recursos respondem-se a partir de documentos.
- Nunca deixe que uma submissão forçada valha por si só como reprovação; uma pessoa revê a tentativa, as gravações e os eventos de auditoria antes de qualquer resultado ser definitivo.