Pontos-Chave
- Quizzes fáceis com tentativas ilimitadas verificam persistência, não conhecimento
- Verificação real testa aplicação através de cenários e alternativas erradas plausíveis
- Avaliações espaçadas ao longo do tempo revelam se o conhecimento está sendo retido ou desvanecendo
Todos nós já fizemos isso. Clique. Clique. Clique. Role até o final. Clique próximo. Espere a barra de progresso. Clique próximo novamente. Responda as questões do quiz que são obviamente corretas. Envie. Certificado baixado. Treinamento completo.
Você aprendeu alguma coisa? Talvez. Provavelmente não. Mas você está marcado como treinado, e isso era o que importava, pelo menos para o sistema.
É assim que funciona a maioria dos treinamentos corporativos. Conclusão é a métrica. Eles terminaram? Passaram no quiz? Marque a caixa, siga em frente.
Mas a conclusão mede mal o aprendizado, e o quiz no final (com suas respostas óbvias e tentativas ilimitadas) verifica muito pouco. Se você se importa se as pessoas aprenderam algo, precisa de uma abordagem diferente.
O Problema com Métricas Baseadas em Conclusão
Quando conclusão é o objetivo, é isso que as pessoas otimizam. Elas clicam o mais rápido possível. Pulam o que podem pular. Chutam no quiz até passar.
O sistema de treinamento mostra 100% de conclusão. A liderança vê painéis verdes. Todos se sentem bem.
Enquanto isso, o conhecimento não foi transferido. Os comportamentos não mudaram. Quando surge a situação em que alguém deveria aplicar o que "aprendeu", não aplica, porque nunca aprendeu.
Isso não é funcionários sendo preguiçosos ou mal-intencionados. É uma resposta racional aos incentivos. Se a única coisa que importa é completar o treinamento, é nisso que vão focar. O sistema é projetado para conclusão. Só não consegue aprendizado.
O Problema com Quizzes Fáceis
O quiz de fim de treinamento deveria verificar compreensão. Na prática, raramente faz.
A maioria das questões de quiz é fácil demais. As alternativas erradas são obviamente erradas. A resposta correta é ou senso comum ou está redigida de forma que combina exatamente com os slides do treinamento. Correspondência de padrões, não compreensão.
A maioria dos quizzes permite tentativas ilimitadas. Errou? Tente de novo. Continue tentando até passar. O que isso verifica é persistência.
A maioria dos quizzes acontece imediatamente após o treinamento. Recordação de curto prazo é fácil. A questão real é se alguém vai lembrar na próxima semana, no próximo mês, quando precisar. O quiz imediato pós-treinamento não testa isso.
Como É a Verificação Real
Verificação deveria responder a pergunta: Esta pessoa consegue aplicar o que deveria ter aprendido?
Isso requer algumas mudanças.
Teste aplicação, não recordação. Em vez de "qual é a política sobre X?" pergunte "aqui está uma situação. O que você deveria fazer?" Questões baseadas em cenário revelam se alguém pode usar conhecimento em vez de apenas reconhecê-lo.
Use alternativas erradas plausíveis. Se as alternativas erradas são obviamente erradas, a questão não testa nada. Bons distratores representam equívocos reais, erros comuns, ou coisas que parecem certas mas não são.
Limite tentativas, ou torne-as custosas. Se alguém falha em um quiz, isso é informação. Ou não aprenderam, ou o treinamento não funcionou. Tentativas ilimitadas escondem esse sinal. Limitar tentativas (ou exigir re-treinamento antes de tentar novamente) torna a avaliação significativa.
Separe o quiz do treinamento. Quizzes imediatos testam memória de curto prazo. Um quiz feito um dia depois, ou uma semana depois, testa retenção real. Avaliações espaçadas ao longo de semanas ou meses mostram se o conhecimento está sendo retido ou desvanecendo.
Além de Quizzes: Outras Abordagens de Verificação
Quizzes são simples de implementar, mas não são a única forma de verificar aprendizado.
Observação e feedback: Um gestor pode observar se alguém aplica o treinamento? Um gerente de vendas que participa de chamadas pode ver se o treinamento de produto se traduz em conversas reais. É alto esforço mas alta validade.
Demonstrações práticas: Antes de alguém ser certificado em uma habilidade, demonstra. Mostre-me como você lidaria com essa reclamação de cliente. Me conduza por como você usaria este sistema.
Revisão de produção de trabalho: Os relatórios melhoraram após o treinamento? As taxas de erro diminuíram? Conectar treinamento a resultados é mais difícil mas mais significativo.
Autoavaliação com validação: Peça às pessoas para avaliar sua própria confiança em aplicar o que aprenderam. Depois compare com performance real. A lacuna entre autopercepção e realidade é informação útil.
O Desafio Organizacional
Melhor verificação parece bom em princípio. Na prática, encontra resistência.
Exige mais esforço. Escrever boas questões é mais difícil do que escrever fáceis. Limitar tentativas significa lidar com falhas.
Revela verdades desconfortáveis. Quando a verificação é significativa, algumas pessoas não passarão. Alguns treinamentos serão revelados como ineficazes. A ficção confortável de taxas de conclusão de 100% desaparece.
Requer métricas diferentes. Se você reporta taxas de conclusão e elas sempre foram 98%, mudar para verificação significativa pode mostrar 70% de competência. Isso parece regressão, mesmo sendo apenas honestidade.
Superar isso requer decidir que aprendizado importa mais do que a aparência de aprendizado. Essa é uma decisão organizacional mais do que uma tática de T&D.
Um Caminho Prático à Frente
Você provavelmente não pode reformular tudo de uma vez.
Comece com treinamento de alto risco. Compliance, segurança, qualquer coisa onde errar tem consequências. É aqui que a lacuna entre conclusão e competência mais importa.
Melhore questões antes de mudar sistemas. Você pode tornar quizzes existentes mais significativos sem nova tecnologia. Melhores questões, melhores distratores, menos tentativas.
Pilote avaliação espaçada. Escolha um programa de treinamento e adicione uma avaliação de acompanhamento duas semanas depois. Compare os resultados com o quiz imediato pós-treinamento. A lacuna mostrará quanto está sendo retido.
O objetivo do treinamento é aprendizado. O objetivo da verificação é confirmar que o aprendizado aconteceu. "Clique próximo para continuar" não confirma nenhum dos dois.
Verificação real requer questões mais difíceis, avaliações menos indulgentes e a disposição de ver resultados desconfortáveis. É mais trabalho. É também a diferença entre treinamento que muda comportamento e treinamento que apenas marca caixas.
O JoySuite pode criar questões baseadas em cenários a partir dos seus próprios documentos, para você testar como as pessoas aplicam o que aprenderam.
