voltar para o blog

A Inteligência por trás da Nota do ENEM Atualizado no dia

A Inteligência por trás da Nota do ENEM

A Teoria da Resposta ao Item (TRI) funciona mais que um método de correção; ela funciona como um sensor de proficiência. Enquanto em um vestibular tradicional (Teoria Clássica) você ganha pontos por "quanto" acertou, no ENEM você é avaliado pela consistência do que acertou.

Vamos usar aqui duas comparações com termos que podem servir até na sua preparação para compreensão dos objetos de estudo do Enem: enquanto uma correção tradicional (Teoria Clássica) é um termômetro simples (quanto mais acertos, maior a nota), a TRI é um sonar pedagógico, ela emite uma "onda" sobre as respostas para verificar se o que o aluno demonstra saber é real ou fruto do acaso (mero chute).

Na Biologia podemos comparar a Teoria Clássica com o exame de sangue, pois ele mede o que está circulando no momento do exame. Se você tomou açúcar antes do exame, sua glicose sobe. Ele te dá uma "foto" do momento, mas não explica sua constituição. Se você acertou 30 questões, o exame diz: "nível de acerto 30". Já a TRI é como se fosse uma Biópsia Genética, ela não quer saber apenas o que está no seu sangue hoje, mas o que está codificado no seu DNA (seu traço latente). O sensor genético identifica se você tem a "instrução" para processar conteúdos complexos. De modo que se você acerta uma questão difícil sem ter o "gene" (a base) do conhecimento simples, a TRI detecta que houve uma mutação (o chute) e não valida aquela característica como parte da sua identidade real de aluno. Compreenderam? A TRI busca medir seu traço latente aquela habilidade real que está "escondida" atrás das suas respostas.

Nesse formato de avaliação (TRI), a estrela não é a prova, mas o item (a questão, que é composta por partes bem específicas e tem um método próprio de construção). Cada item possui uma "identidade" própria, independente de quem o responde. Isso permite a invariância, que é a capacidade do sistema de conseguir medir sua habilidade em Matemática seja com uma prova fácil ou difícil, pois ele conhece o comportamento de cada questão.

É importante destacar que cada item do ENEM é construído para avaliar uma Habilidade específica das Matrizes de Referência. Se você erra uma questão de escala (Matemática) mas acerta uma de logaritmo, a TRI detecta uma inconsistência pedagógica na base que deveria ter sido construída no Ensino Fundamental.

A Anatomia de cada item (questão) do ENEM é composta pelo que chamamos de Modelo Logístico Unidimensional de 3 Parâmetros (ML3). Para "estudar a TRI", você precisa visualizar estes três componentes em cada pergunta:

  • Parâmetro “b” (Dificuldade): É a posição da questão na "régua" de conhecimento. Se sua habilidade é menor que a dificuldade da questão, sua chance de acerto cai drasticamente.
  • Parâmetro “a” (Discriminação): É o poder de separação. Uma questão com alto parâmetro de discriminação separa com precisão quem realmente domina o assunto de quem apenas "acha" que sabe.
  • Parâmetro “c” (Acerto Casual/Chute): É a probabilidade de um aluno de baixa proficiência acertar. Itens com parâmetro “c” muito alto são menos "confiáveis" para o algoritmo.

A TRI assume que o conhecimento é cumulativo. Se você acertou as questões difíceis, mas errou as fáceis, o modelo matemático interpreta que você não possui a base necessária. Com isso, sua nota não sobe tanto quanto poderia, porque o sistema atribui seus acertos difíceis ao acaso. A estratégia, como explicamos na matéria “Devo fazer as questões fáceis primeiro no Enem? Entenda a estratégia que blinda sua nota”, é garantir as fáceis e médias é mais lucrativo do que gastar 10 minutos em uma difícil e errar o básico por falta de tempo.

Diferente da Teoria Clássica, onde a precisão é a mesma para todos, na TRI a prova tem pontos de foco. Se uma prova de Natureza tem muitos itens médios, ela será excelente para distinguir alunos de nível médio, mas "míope" para diferenciar os alunos de alto rendimento. O INEP equilibra os itens para que a Função de Informação do Teste seja ampla o suficiente para avaliar desde quem está na base quanto quem busca um curso mais concorrido.

Existe algo que pode ser entendido como a régua do conhecimento quando observamos a nota do ENEM, pois não se trata de um ranking de 0 a 1000 de forma linear. É uma régua comparativa que possui os “itens âncora” que são questões que definem o que um aluno de "Nível 600" sabe fazer. Por exemplo, para ser âncora do nível 500, o item deve ter um percentual de acerto alto (ex: 65%) entre quem está no 500, e baixo entre quem está no 400. Isso cria um diagnóstico pedagógico, pois sua nota diz se você domina "interpretação de gráficos" ou se já chegou em "análise combinatória".

Graças à TRI, o INEP utiliza Itens Comuns ou o Pré-Teste para garantir que a métrica seja a mesma através dos anos. Isso se chama Equalização. É o que permite que você use sua nota de três anos atrás no SISU atual com total justiça técnica.

Newsletter

Gostou do artigo?

Receba mais conteúdos como este direto no seu e-mail.

Sem spam. Cancele quando quiser.

Você tem que estar logado para comentar!