Perícia feita no Inep indica fragilidades no processo de pontuação das medidas de provas do Enem 2016

Enem 2016 foi realizado nos meses de novembro e dezembro
Divulgação/Ari de Sá
Uma perícia realizada no Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira (Inep) analisou avaliações do Exame Nacional do Ensino Médio (Enem) 2016, realizado em duas datas, e constatou fragilidades no processo de pontuação das medidas da prova.
O motivo da perícia, contratada pelo Ministério Público Federal (MPF) em Uberlândia (MG) após ação judicial, foi verificar se o fato de as duas aplicações do Enem 2016 terem números muito diferentes de candidatos influenciou no resultado final, e se isso prejudicou os alunos da segunda aplicação.
Em 2016, por causa das ocupações estudantis, o exame foi aplicado duas vezes: a primeira em 5 e 6 de novembro, com a participação de 5,8 milhões de alunos, e a segunda em 3 e 4 de dezembro, em que fizeram as provas menos de 170 mil candidatos.
Em nota, o Inep informou ao G1 que não foi notificado oficialmente sobre qualquer resultado a respeito da perícia, que foi realizada entre os dias 5 e 9 de fevereiro deste ano, nas dependências do instituto.
"O Inep conta com a consultoria de diversos especialistas de destacada atuação em análise estatística e psicométrica de avaliações e exames em larga escala e tem total segurança quanto à metodologia que, desde 2009, é adotada no Enem - reconhecida nos âmbitos nacional e internacional, e se pronunciará quando for devidamente notificado", diz o texto.
"Vale registrar que, independentemente do seu conteúdo, o referido laudo representa uma opinião isolada", concluiu a assessoria de comunicação do instituto.
Em laudo, perícia relata fragilidades em Enem 2016
Reprodução/MPF
Resultado da perícia
A perícia foi realizada por Tufi Machado Soares que é professor do Departamento de Estatística e do Programa de Doutorado e Mestrado em Educação, e coordenador da Unidade de Pesquisa do Centro de Políticas Públicas e Avaliação da Educação (Caed) da Universidade Federal de Juiz de Fora (UFJF).
O perito, que atuou como membro do conselho científico do Enem e é especialista em Teoria da Resposta ao Item (TRI), metodologia usada no exame, teve acesso a informações sigilosas no Inep e produziu um laudo com 207 páginas.
Neste documento, enviado à reportagem pelo MPF, o perito relata fragilidades no processo de pontuação das medidas do Enem que poderiam prejudicar a comparabilidade dos resultados produzidos para duas provas diferentes.
No laudo, os pontos de fragilidade encontrados, por ordem de importância, foram:
Número de itens comuns previamente calibrados nos pré-testes e fixados na prova regular do Enem;
Tamanho das amostras de calibração em alguns pré-testes;
Precisão com que os resultados do Enem são reportados ao público;
Ausência de informações para o público sobre a qualidade dos testes e das medidas.
Além disso, o laudo mostra que ambos os testes nas disciplinas de Ciências Humanas e Ciências da Natureza apresentam mesmos níveis de precisão em praticamente todos os níveis de proficiência. Nesse sentido, então, os testes foram praticamente equivalentes, embora a prova da segunda aplicação de Ciências da Natureza tenha sido um pouco mais fácil.
O perito diz no texto que a maioria das diferenças encontradas ocorreu nas disciplinas de Linguagens e Códigos e na de Matemática, sendo que na primeira houve vantagem dos candidatos da 1ª prova e, na segunda, dos candidatos da 2ª prova. As menores diferenças observadas ocorrem em Ciências da Natureza.
No entanto, o Tufi Soares ressalva que não é possível realizar uma análise de comparabilidade para todos os casos, individualmente, nas dimensões do Enem.
“Cada caso precisaria ser analisado individualmente e, provavelmente, não se chegaria a uma conclusão definitiva na maioria”, diz o perito no laudo.
No documento, o professor também faz sugestões de mudanças na forma de confecção e divulgação da prova.
O G1 entrou em contato com o perito nesta sexta-feira (20), para saber mais informações sobre o resultado da perícia. Por telefone, ele disse que não pretende se manifestar até a realização de uma audiência pública, qu ainda será agendada pelo MPF.
Alunos reclamam de incoformismo com as notas resultantes da primeira e da segunda aplicação do exame de 2016
Roberto Araujo/G1
Próximos passos
O procurador da República, Leonardo Macedo, responsável pelo inquérito civil que apura irregularidades referentes à adoção de diferentes critérios de correção das provas do Enem 2016, informou que encaminhou o resultado da perícia para o Inep e para estudantes que manifestaram que foram lesados pelo teste.
"O laudo é extenso e não tem uma conclusão única. O primeiro passo foi encaminhar essa perícia aos principais interessados e vamos dar um prazo para análise de todos. Depois disso, vamos marcar uma audiência pública onde todos poderão colocar o ponto de vista referente ao assunto e só depois o MPF vai analisar como agir", explicou o procurador.
Segundo o MPF, ainda não há previsão para realização desta audiência. "Estam

Fonte original: abrir