10.1 Estrutura do relatório#
O cabeçalho identifica prova, projeto e agrupamento. A análise de rendimento reúne GER, matérias e setores; a análise de questões detalha seus itens.
Os códigos combinam folha e posição, como A_1 e B_1. Confira essa identificação ao consultar o enunciado e o gabarito.
No resultado absoluto, 60% de acerto significa que seis em cada dez participantes acertaram o item. Esse dado informa a proporção de acerto naquela população. A causa de um resultado baixo ou alto depende de informações adicionais.
10.2 O grupo de referência superior#
O exemplo do manual básico ordena os alunos pelo total de pontos da prova e separa os 30% com melhor desempenho para formar uma segunda média de referência. A média da turma continua incluindo todos os alunos, inclusive esse grupo.
Nessa apresentação:
- a barra larga mostra a média de todos;
- a barra fina mostra a média do grupo superior;
- a diferença entre as duas médias mostra a discriminação.
O grupo superior é selecionado pelo conjunto da prova, não por questão. Por isso, pode apresentar baixo desempenho em um item específico.
10.3 Discriminação#
No modo ilustrado que compara o grupo superior com todos os participantes:
δ = média do grupo superior − média de todos
Uma questão com 60% de acerto na turma e 85% no grupo superior tem discriminação de +25 p.p. Uma questão com 19% na turma e 5% no grupo superior tem −14 p.p.
| Resultado | O que indica | O que investigar |
|---|---|---|
| Discriminação positiva | O grupo superior acertou mais | Dificuldade e adequação da questão ao objetivo |
| Discriminação próxima de zero | As médias ficaram próximas | Questão muito fácil, muito difícil ou com pouca diferenciação |
| Discriminação negativa | O grupo superior acertou menos | Gabarito, enunciado, alternativas e condições de aplicação |
O sinal estatístico é um indício para revisão. Não prova sozinho que houve erro de gabarito, problema de ensino ou qualquer conduta específica.
10.4 Os casos da professora Tunica#
Os materiais usam três questões sobre um conteúdo trabalhado em aula:
| Questão | Todos | Grupo superior | Diferença | Leitura inicial |
|---|---|---|---|---|
| Q15 | 60% | 85% | +25 p.p. | Há dificuldade e diferenciação; vale comentar os erros |
| Q16 | 30% | 68% | +38 p.p. | Poucos acertaram, mas o grupo superior se destacou |
| Q17 | 90% | 95% | +5 p.p. | A maioria acertou; sobra pouca margem para diferenciação |
A Q16 pode merecer retomada dos fundamentos, observando o enunciado, o conteúdo ensinado e o desempenho de outras turmas. Na Q17, um alto acerto pode ser coerente com uma avaliação de verificação de conteúdo. O objetivo da prova faz parte da análise.
Outros casos apresentados são Q32, com 95% e 92%; Q33, com 19% e 5%; e Q65, com 10% e 15%. Os dois primeiros têm discriminação negativa. O último apresenta acerto muito baixo mesmo no grupo superior. Todos pedem exame do contexto antes de uma conclusão.
10.5 Distribuição das alternativas#
A análise de questões pode mostrar o percentual de marcações em cada alternativa, a alternativa do gabarito, o acerto médio e o acerto do grupo superior.
Observe se uma alternativa incorreta concentrou respostas, se as marcações ficaram dispersas e se o grupo superior seguiu um padrão diferente. Volte ao enunciado e às alternativas para investigar a hipótese levantada pelos dados.
Marcações por alternativa e acerto da questão são medidas diferentes. Coincidem para a alternativa do gabarito, na mesma população e no mesmo critério de contagem.