Se testar vale mais do que ser testado

- A síntese de John Hattie reúne mais de 2.100 meta-análises, e a média de todas elas é 0,40. Esse número serve de régua para comparar qualquer estratégia.
- O efeito de testar aparece na tabela em 0,59, acima da régua. A testagem frequente aparece em 0,39, abaixo dela.
- Os dois números medem coisas diferentes. Um é o ato de recuperar a informação da memória, o outro é a quantidade de provas aplicadas.
- A conclusão prática é que o ganho não vem de fazer mais provas. Vem de fechar o material e tentar responder antes de conferir.
- Hattie adverte que 0,40 é apenas a média da própria base, e não uma constante mágica. Ele também rejeita converter efeito em anos de progresso.
- Isso muda o papel da lista de exercícios: ela deixa de ser a conferência do que você estudou e passa a ser o estudo em si.
Existe uma diferença entre fazer prova e se testar, e ela quase nunca é dita. A maior síntese de pesquisa educacional já reunida mediu as duas coisas em linhas separadas, e os números não deram iguais.
A obra é Visible Learning, de John Hattie, que na edição de 2023 reúne mais de 2.100 meta-análises, extraídas de mais de 130 mil estudos. Ela não pergunta o que funciona, porque quase tudo funciona um pouco. Ela pergunta o que funciona melhor.
Primeiro, a régua
Antes de olhar qualquer número, é preciso saber com o que compará-lo. Na síntese, a referência é 0,40, e vale entender de onde ela sai: é simplesmente a média de todas as 2.100 meta-análises.
Não se trata de constante mágica nem de selo de aprovação: é a média do conjunto, e serve melhor do que comparar contra o zero, porque contra o zero quase qualquer coisa consegue alegar que ajuda um pouco.
O próprio Hattie adverte contra usar o 0,40 cegamente, e rejeita a conversão de tamanho de efeito em "anos de progresso", que ele considera fonte de alegação absurda.
Os dois números que ninguém coloca lado a lado
Na tabela de feedback e avaliação, duas linhas tratam de prova. E elas estão em lugares bem diferentes da régua.
| O que foi medido | Efeito | Onde fica em relação à régua |
|---|---|---|
| Efeitos de testar | 0,59 | Acima |
| Feedback de provas | 0,41 | Em cima |
| Avaliação formativa | 0,40 | Em cima |
| Testagem frequente | 0,39 | Abaixo |
Repare no par de cima e no de baixo. Efeitos de testar trata do ato de recuperar a informação, de puxar a resposta da própria memória. Testagem frequente trata da quantidade de provas aplicadas. São coisas diferentes, e a diferença entre 0,59 e 0,39 é justamente o espaço da régua inteira.
O que isso significa na prática
Significa que o ganho não está em fazer mais provas. Está em fechar o material e tentar responder antes de conferir.
Parece detalhe e não é. Ler a explicação e concordar com ela produz uma sensação forte de que você aprendeu, porque enquanto o texto está aberto tudo faz sentido. Essa sensação é a leitura funcionando, e não o aprendizado. O aprendizado aparece na hora em que o texto não está mais lá.
- Feche o caderno antes de responder. Consultar enquanto resolve desliga exatamente o mecanismo que rende 0,59.
- Tente a resposta mesmo sem certeza. Errar tentando é diferente de pular. A tabela traz fracasso produtivo em 0,39, praticamente a régua inteira.
- Confira depois, e não durante. A conferência é feedback, e vale por si, mas só depois que a tentativa aconteceu.
- Anote o que você não conseguiu puxar. Esse é o material da próxima sessão, e não o assunto que você já domina.
Isso muda o papel da lista de exercícios
No jeito comum de estudar, a lista vem depois: estuda-se a matéria e a lista serve para conferir se ficou. Nessa lógica, errar é sinal de que o estudo falhou.
Pelo que a síntese mede, a ordem é outra. A lista é o estudo, e não a verificação dele. Errar ali é a parte que produz o efeito, e não a falha, desde que a tentativa seja de verdade e a conferência venha depois.
Na prática, isso encurta o tempo entre ler o assunto e resolver a primeira questão dele. Não é preciso terminar o capítulo para começar a se testar, e adiar essa hora costuma custar mais do que ajuda. Sobre como transformar isso em rotina, escrevi em como revisar para a EPCAr, e o formato de prova completa está em como fazer simulado em casa.
Onde o número não vale
Vale registrar o limite, porque número solto vira slogan. A própria síntese avisa que a leitura muda conforme o resultado seja estreito, como vocabulário, ou largo, como compreensão. E que efeito baixo não deve ser descartado automaticamente: alguns precisam ser entendidos justamente para serem melhorados.
A base também tem viés documentado por tipo de publicação. Estudos publicados em livro trazem efeito médio de 0,52, e em congresso, 0,34. A diferença diz respeito ao que costuma ser publicado, e não ao que funciona. Quem cita o número honestamente cita também essa parte.
Perguntas frequentes
O que é o efeito de testar?
Fazer mais provas melhora o desempenho?
O que significa tamanho de efeito 0,40?
Devo consultar o material enquanto resolvo a lista?
Errar na lista significa que estudei mal?
Quando começar a fazer questão de um assunto novo?
Esses números valem para qualquer matéria?
Receba conteúdo exclusivo
Análises como esta, direto no seu e-mail, antes de virarem vídeo
Yago Castelo
Professor de Matemática do Elementar, cristão e apaixonado por educação. 5º colocado na EPCAR em 2022, acredito no poder da disciplina, da excelência e da fé para transformar vidas.





Comentários
Nenhum comentário ainda. Comece a conversa.