Análise Oficial Identifica Problemas na Pontuação do Enem 2016

Uma perícia realizada no Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira (Inep) identificou fragilidades significativas no processo de pontuação do Enem 2016, levantando questões sobre a equidade entre os candidatos que realizaram o exame em diferentes datas. O documento, encomendado pelo Ministério Público Federal (MPF) em Uberlândia, Minas Gerais, após ação judicial, investigou se as discrepâncias entre o número de participantes nas duas aplicações influenciaram os resultados finais do exame.

O contexto que levou à perícia do Enem 2016 relaciona-se diretamente aos movimentos de ocupação estudantil ocorridos em 2016. Naquele ano, o Instituto Nacional de Estudos e Pesquisas Educacionais precisou aplicar o exame em duas ocasiões distintas. A primeira ocorreu em 5 e 6 de novembro, contando com aproximadamente 5,8 milhões de candidatos, enquanto a segunda aplicação, realizada em 3 e 4 de dezembro, recebeu menos de 170 mil participantes. Essa disparidade no número de alunos gerou preocupações sobre possíveis impactos nas metodologias de avaliação e comparabilidade dos resultados.

Especialista em Metodologia de Avaliação Conduz Análise Detalhada

O estudo foi conduzido por Tufi Machado Soares, professor do Departamento de Estatística e pesquisador do Centro de Políticas Públicas e Avaliação da Educação (Caed) na Universidade Federal de Juiz de Fora. Soares possui vasta experiência em psicometria e atuou como membro do conselho científico do próprio Enem, sendo especialista em Teoria da Resposta ao Item (TRI), a metodologia empregada na avaliação. Tendo recebido autorização para acessar informações sigilosas das bases de dados do Inep, o perito produziu um relatório minucioso com 207 páginas documentando sua análise.

No laudo enviado ao Ministério Público Federal, Soares relata fragilidades substanciais no processo de pontuação das medidas que poderiam comprometer a capacidade de comparação dos resultados obtidos pelas duas provas diferentes. O documento identifica vulnerabilidades em vários aspectos técnicos e metodológicos da avaliação.

Pontos Críticos Identificados na Estrutura do Exame

Os pontos de fragilidade encontrados durante a perícia do Enem 2016 foram organizados por ordem de importância. O primeiro diz respeito ao número limitado de itens previamente calibrados nos pré-testes e fixados na versão final do exame. O segundo problema identificado refere-se ao tamanho inadequado das amostras utilizadas para calibração em determinados pré-testes. O terceiro ponto de fragilidade envolve a precisão com que os resultados são divulgados publicamente. Por fim, o documento aponta a ausência de informações transparentes para o público sobre a qualidade dos testes e das medidas utilizadas.

Além desses problemas estruturais, o laudo revela que os testes nas disciplinas de Ciências Humanas e Ciências da Natureza apresentaram níveis semelhantes de precisão em praticamente todos os níveis de proficiência, sugerindo que os testes foram praticamente equivalentes. Uma exceção notável é que a prova de Ciências da Natureza aplicada em dezembro mostrou-se ligeiramente mais acessível que sua correspondente em novembro.

Diferenças Significativas entre Disciplinas

Conforme documentado na perícia do Enem 2016, as maiores discrepâncias nos resultados ocorreram nas disciplinas de Linguagens e Códigos e Matemática. Na primeira disciplina mencionada, candidatos da primeira aplicação apresentaram vantagem nas notas, enquanto na segunda, os participantes da aplicação de dezembro tiveram melhor desempenho. As variações menos expressivas foram observadas em Ciências da Natureza. Contudo, Soares ressalva que uma análise de comparabilidade completa em todos os casos individuais dentro das dimensões do Enem não seria viável com as informações disponíveis.

O perito enfatiza que cada situação individual precisaria ser examinada separadamente, e que provavelmente não seria possível chegar a conclusões definitivas na maioria dos casos analisados isoladamente. Essa limitação metodológica destaca a complexidade inerente ao processo de avaliação em larga escala.

Posicionamento do Inep Frente aos Achados

O Instituto Nacional de Estudos e Pesquisas Educacionais manifestou-se por meio de nota oficial dirigida à imprensa, informando que não recebeu notificação oficial quanto aos resultados da perícia realizada entre 5 e 9 de fevereiro de 2018. Segundo o Inep, a instituição conta com consultoria de diversos especialistas reconhecidos em análise estatística e psicométrica de avaliações em larga escala, mantendo confiança total na metodologia adotada desde 2009, reconhecida em âmbitos nacional e internacional.

A assessoria de comunicação do instituto ressaltou que, independentemente do conteúdo apresentado no laudo, este representa uma opinião isolada. A resposta oficial sugere que o Inep não concorda com as conclusões apresentadas e pretende oferecer sua perspectiva quando devidamente notificado dos resultados formais.

Próximos Encaminhamentos e Audiência Pública

O procurador responsável pela investigação, Leonardo Macedo, informou que encaminhou o resultado da perícia para o Inep e para estudantes que manifestaram ter sido prejudicados pelos critérios aplicados. Conforme explicado pelo procurador, o laudo apresenta extensão considerável e não oferece uma conclusão única e definitiva, o que requer análise cuidadosa por todas as partes interessadas.

O próximo passo envolve a realização de uma audiência pública, ainda não agendada, onde todos os interessados poderão apresentar suas perspectivas sobre a questão. Apenas após essa discussão pública, o Ministério Público Federal analisará qual linha de ação seguir. Conforme declarado por Macedo, as opções sob consideração incluem solicitação de indenização aos candidatos prejudicados, revisão de notas ou outras medidas cabíveis, sendo necessário agir com cautela diante da complexidade do assunto.

Contexto das Ocupações Estudantis de 2016

As razões que levaram à necessidade de duas aplicações do Enem 2016 originaram-se das amplas ocupações estudantis que ocorreram simultaneamente em múltiplos estados brasileiros. Em outubro de 2016, uma onda de protestos estudantis começou no Paraná contra medidas federais, incluindo a reforma do ensino médio e a Emenda Constitucional 241. Essas ocupações se espalharam por 21 estados e pelo Distrito Federal, afetando 1.154 estabelecimentos de ensino, conforme levantamento da União Brasileira dos Estudantes Secundaristas.

Como muitas dessas escolas ocupadas funcionariam como locais de aplicação do exame, o Ministério da Educação anunciou adiamento em 364 locais de prova quatro dias antes da data inicialmente marcada. Essa decisão garantiu que aproximadamente 277 mil candidatos pudessem realizar o exame em datas posteriores, embora representassem menos de 5% do total de inscritos. A primeira aplicação registrou abstenção de 30%, enquanto a segunda apresentou taxa de 40%, refletindo diferentes perfis de candidatos nas duas ocasiões.

Reclamações dos Candidatos Prejudicados

A investigação do Ministério Público Federal teve início após janeiro de 2017, quando foram divulgados os resultados da edição 2016 do exame. Naquele período, estudantes de todo o país procuraram o órgão para registrar insatisfação com as notas obtidas, especialmente aqueles que realizaram a segunda aplicação. Uma análise preliminar das reclamações evidenciou disparidades significativas quando as notas dos candidatos da segunda data eram comparadas com as da primeira aplicação. Segundo o procurador Macedo, alunos que realizaram a prova em novembro obtiveram notas consideravelmente maiores.

O Ministério Público Federal argumenta que essa discrepância poderia estar relacionada à aplicação da Teoria da Resposta ao Item, que considera o número total de participantes em cada aplicação. A instituição alega que fatores como a maior abstenção na segunda aplicação, o percentual diferente de candidatos que realizam o exame apenas para treino (treineiros) e o perfil dos locais de prova utilizados em dezembro podem ter influenciado nos cálculos das notas finais de forma prejudicial aos candidatos da segunda data.