Porque é que os resultados submetidos nunca mudam
Os resultados de um candidato são calculados a partir das pontuações por resposta guardadas nessa tentativa: a pontuação automática registada quando ele respondeu, e as pontuações de grelha que os seus avaliadores introduziram. Editar a estrutura da avaliação nunca reescreve essas pontuações guardadas, pelo que acrescentar, editar, reordenar ou remover itens não altera um candidato que já submeteu.
Os itens que acrescenta depois de um candidato ter submetido são simplesmente saltados na consolidação desse candidato — uma resposta em falta nunca é tratada como zero, pelo que as perguntas novas não podem puxar em silêncio os candidatos anteriores para baixo. O builder mostra um aviso nas avaliações ativas a confirmá-lo enquanto edita.
O que as alterações de pesos e de pontos afetam
Há uma exceção honesta ao "nada muda": as definições de agregação. A adequação à função é uma consolidação ponderada, calculada a partir das pontuações guardadas com os pesos de secção atuais, os pesos do mapeamento de capacidades e os pontos dos itens. As pontuações brutas continuam congeladas, mas se alterar o peso de pontuação de uma secção ou os pontos de um item numa avaliação ativa, as percentagens de adequação à função são recalculadas com a nova ponderação — para todos os candidatos, incluindo os que já submeteram.
Isto é intencional: toda a gente é sempre medida pelas mesmas regras atuais, para que os candidatos continuem comparáveis. Mas significa que alterar pesos a meio de uma coorte vai deslocar a tabela classificativa para que já andava a olhar. Nas avaliações ligadas a um perfil de função, as decisões registadas guardam também um instantâneo da adequação à função do momento em que cada decisão foi tomada, para que o seu processo de decisão continue defensável.
- Conteúdo dos itens, ordem e itens novos: sem efeito nos candidatos que já submeteram.
- Pesos das secções, pesos das capacidades, pontos dos itens: a adequação à função é reagregada para toda a gente.
- As edições de chaves de resposta aplicam-se apenas a submissões futuras; as respostas anteriores mantêm a pontuação registada.
- Nas avaliações ligadas a um perfil de função, as decisões registadas guardam um instantâneo da adequação à função do momento da decisão.
Candidatos a meio de uma tentativa ou ainda por começar
Os candidatos que começam depois da sua edição realizam a avaliação atualizada. Um candidato que está a meio de uma tentativa continua na versão que carregou; se retomar ou recarregar, recebe a estrutura atualizada, e todas as respostas que já guardou continuam associadas ao seu item.
Para edições que mudam aquilo que está a ser medido — trocar uma tarefa, alterar uma chave de resposta, voltar a ponderar secções — pense na comparabilidade antes de editar a meio de uma coorte: os candidatos de antes e de depois da alteração terão respondido a avaliações ligeiramente diferentes. Para uma reformulação substantiva, o caminho mais limpo é duplicar a avaliação para um novo rascunho e realizar a coorte seguinte na nova versão.
Quando a edição está bloqueada
Assim que uma avaliação é fechada ou arquivada, a sua estrutura bloqueia e os seus resultados são definitivos — o builder diz-lho e oferece antes a duplicação. Duplique-a para um novo rascunho para fazer alterações; o duplicado transporta consigo a estrutura, os pesos e os instantâneos das grelhas.
Editar exige também permissão de edição estrutural no seu espaço de trabalho. Se consegue ver o builder mas não o consegue alterar, um aviso explica que a sua função não inclui edições estruturais.
At a glance
- As avaliações em rascunho e ativas são ambas editáveis; as avaliações fechadas e arquivadas estão bloqueadas.
- Os candidatos que já submeteram mantêm exatamente os seus resultados — as pontuações vêm daquilo que responderam.
- Os itens acrescentados depois de um candidato submeter são saltados na consolidação desse candidato, nunca contados como zero.
- Alterar os pesos de pontuação ou os pontos de um item volta a ponderar a adequação à função para toda a gente, incluindo os candidatos anteriores.
- Os candidatos que começam ou retomam depois da sua edição veem a versão atualizada.