Análise de Resultados de Avaliação

Pergunte como uma avaliação de curso está indo entre turmas e receba uma análise escrita com um gráfico embutido das taxas de aprovação, além das questões que as pessoas mais erram. Um retrato sob demanda, fundamentado nos dados do seu LMS, para você saber exatamente qual conteúdo corrigir.

Para Líderes de T&D Designers Instrucionais Gerentes de Treinamento e Capacitação Equipes de Compliance e Certificação
Prompt de exemplo para o assistente Joy

Analise os resultados de [Tratamento e Privacidade de Dados] nas [nossas últimas três turmas] e me mostre as taxas de aprovação, as pontuações médias e as questões que as pessoas mais erram.

Como pode ficar

Um exemplo ilustrativo. Seu resultado vai refletir suas fontes, dados e pedidos.

Analise os resultados de Tratamento e Privacidade de Dados nas nossas últimas três turmas e me mostre as taxas de aprovação, as pontuações médias e as questões que as pessoas mais erram.

Lendo os resultados de avaliação de Tratamento e Privacidade de Dados nas suas últimas três turmas, 214 alunos no total. A taxa de aprovação geral é de 78%, logo abaixo da sua nota de corte de 80%, e o padrão de erros aponta para um módulo, e não para um grupo fraco, ambos mostrados abaixo.

Nas suas últimas três turmas de Tratamento e Privacidade de Dados, 214 alunos fizeram a avaliação. A taxa de aprovação geral é de 78% contra uma nota de corte de 80%, e a pontuação média geral é de 84%. Então a maioria vai bem, mas o suficiente fica abaixo da linha para puxar a taxa de aprovação abaixo da meta.

78%
Taxa de aprovação geral
84%
Pontuação média
214
Alunos avaliados

A história está na divisão por turma. A turma do Q1 passou da linha com uma taxa de aprovação de 82%, mas a turma do Q2 caiu para 74% — abaixo da nota de corte — e a do Q3 recuperou só em parte, para 79%. Duas das três turmas ficaram abaixo de 80%, e é por isso que o número combinado fica em 78%.

Taxa de aprovação por turma (nota de corte de 80%)

Turma do Q182%
Turma do Q274%
Turma do Q379%

Uma única turma caindo poderia ser ruído. Mas quando olho quais questões estão puxando as pontuações para baixo, os mesmos itens são errados nas três turmas, então isto se lê como um problema de conteúdo, e não um grupo fraco de alunos. Aqui estão as quatro questões que as pessoas mais erram:

QuestãoRespondida corretamente
Q7 – Períodos de retenção de dados46%
Q3 – Base legal para tratamento58%
Q11 – Prazo de notificação de violação61%
Q5 – Classificação de dados pessoais69%

Apenas 46% acertam Q7 – Períodos de retenção de dados, e 58% acertam Q3 – Base legal para tratamento. Q11 – Prazo de notificação de violação fica em 61% e Q5 – Classificação de dados pessoais em 69%. O importante: as duas questões mais fracas, Q7 e Q3, mapeiam para a mesma seção do curso — Módulo 3, Tratamento e Retenção. Quando duas questões de um mesmo módulo são as duas piores da prova inteira, a lacuna está em como esse módulo ensina o material, não nas pessoas que o fazem.

Minha leitura: esta é uma correção pontual, não um motivo para refazer o curso inteiro. Revise o Módulo 3 — em particular as explicações sobre período de retenção e base legal — e então reavalie a próxima turma nesses itens. Se Q7 e Q3 subirem, você tem sua resposta. As outras três turmas pontuaram bem o suficiente no resto para que uma reconstrução completa seja esforço gasto onde o conteúdo já está funcionando.

Quer que eu puxe a distribuição de respostas erradas da Q7 para ver qual opção as pessoas escolhem no lugar, ou compare estas taxas de aprovação por departamento para verificar se alguma equipe está puxando a média?

De uma taxa de aprovação baixa ao módulo que você precisa revisar

A receita Análise de Resultados de Avaliação lê os resultados de avaliação do seu LMS sob demanda e retorna uma análise escrita com um gráfico embutido: taxa de aprovação por turma, a taxa de aprovação geral e a pontuação média, e uma tabela das questões que as pessoas mais erram. Ela aponta o conteúdo específico a revisar, produzida quando você pergunta, e não um painel que roda sozinho.

  1. Conecte seus dados de avaliação

    Dê ao Joy acesso somente leitura ao seu LMS, ou adicione uma exportação dos resultados de avaliação, respostas questão a questão e registros de turma à Knowledge Center.

  2. Pergunte sobre o curso

    Indique o curso e as turmas que quer comparar, e peça as taxas de aprovação, as pontuações médias e as questões que as pessoas mais erram. O Joy lê os resultados no momento da pergunta e calcula os números.

  3. Leia a análise e o gráfico

    O Joy retorna uma breve análise escrita com um gráfico embutido da taxa de aprovação por turma e uma tabela das questões mais erradas. Os números no texto batem com o gráfico e a tabela.

  4. Leve para a sua revisão de conteúdo

    Copie a análise e os números para as suas notas de revisão de curso ou para a sua atualização ao responsável pelo curso. O Joy redige a análise; você age sobre ela. Nada é exportado ou agendado para você.

  5. Transforme isso em um clique para a sua equipe

    Salve este pedido como um comando personalizado no assistente que a sua equipe já usa, para que qualquer pessoa possa executá-lo em uma única etapa.

Deixe do seu jeito

Taxa de Aprovação por Turma

Um gráfico embutido classifica cada turma em relação à sua nota de corte, para que uma queda seja impossível de não notar.

Questões Mais Erradas

Uma tabela das questões que as pessoas mais erram, ordenadas por quão poucos as acertam.

Conteúdo, Não Alunos

Agrupa as questões fracas por módulo para você distinguir uma lacuna de conteúdo de uma turma pontual.

Fatie até a Causa

Faça um acompanhamento para ver a divisão de respostas erradas de uma questão ou uma visão por departamento, e o Joy relê.

Por Departamento

Compare taxas de aprovação entre equipes para ver se uma lacuna é geral do conteúdo ou específica de uma equipe.

Aprofundamento em Uma Questão

Puxe a distribuição de respostas erradas de um item para ver em qual distrator as pessoas caem.

Tendência entre Turmas

Acompanhe a taxa de aprovação de um curso ao longo de mais turmas para ver se uma revisão realmente funcionou.

Por Módulo

Agregue as pontuações por questão em nível de módulo para classificar quais seções precisam de mais trabalho.

Perguntas Frequentes

Isto é um dashboard de resultados ao vivo que preciso manter?

Não. Esta é uma análise escrita produzida sob demanda com um gráfico embutido, não um painel permanente. Tiramos "Dashboard" do nome de propósito. Quando você pergunta, o Joy lê os resultados das suas avaliações e retorna a leitura para as turmas que você indicou. Nada se atualiza sozinho entre as perguntas.

Como o Joy decide quais questões são as que devem ser corrigidas?

O Joy classifica as questões por quão poucos alunos as acertam, e então consulta o mapa do curso para ver se as fracas se concentram em um módulo. No exemplo, Q7 em 46% e Q3 em 58% estão ambas no Módulo 3, o que aponta para uma lacuna de conteúdo, e não uma turma fraca.

Posso comparar taxas de aprovação por departamento ou equipe?

Sim. Faça um acompanhamento e o Joy relê os dados para dividir as taxas de aprovação por departamento, para você distinguir se uma pontuação baixa é geral do conteúdo ou concentrada em uma equipe.

O gráfico e a tabela batem com os números escritos?

Sempre. As taxas de aprovação no texto são as mesmas do gráfico embutido (Q1 82%, Q2 74%, Q3 79%), e os percentuais na tabela das mais erradas são os que a análise discute, então você pode citar qualquer um sem precisar reconciliá-los.

O Joy pode enviar esta análise ao responsável pelo curso por mim?

Não. O Joy redige a análise no chat; você a copia para suas notas de revisão ou sua mensagem ao responsável pelo curso e a compartilha você mesmo. O Joy não envia mensagens nem agenda relatórios recorrentes em seu nome.

Pronto para encontrar o conteúdo exato que está reprovando seus alunos?

Entre na lista de espera e seja o primeiro a experimentar este fluxo de trabalho quando o JoySuite for lançado.