A nota do Enem 2010

Comentários Moisés Basílio:

Depois de muito vai e vem, e também de muita polêmica,finalmente o Inep coloca a disposição as notas do exame de 2009 e também as faixas de desempenho dos alunos na escala do exame. 

Por ser o primeiro Enem a utilizar da metologia da Teoria de Resposta ao Item (TRI), tudo tem sido novidade para alunos, professores, escolas, mídia etc. O que nos resta a fazer é ir acompanhando o processo para aprender. Axé. 

Fonte: Sítio do Inep em 28/01/2010 - http://www.inep.gov.br/imprensa/noticias/enem/news10_04.htm
Para entender a nota do Enem

Existe uma nota global do Enem?

Não, o Inep não calcula uma média global de desempenho, apenas apresenta as médias separadamente.

A prova do Enem tem cinco notas: uma para cada área de conhecimento avaliada – Ciências da Natureza, Ciências Humanas, Linguagens e Matemática –, mais a média da redação. Para o cálculo das médias em cada uma das quatro áreas foi utilizada metodologia da Teoria de Resposta ao Item (TRI), que busca medir o conhecimento a partir do comportamento observado em testes. No caso da redação, os critérios são os mesmos do Enem tradicional.

Para distribuição das vagas no Sistema de Seleção Unificada, do Ministério da Educação, as instituições vão utilizar o conjunto de notas do Enem seguindo critérios específicos de agregação e peso.
Como é calculada a nota do Enem em TRI
Diferentemente de uma prova comum, a nota do Enem em cada área não representa simplesmente a proporção de questões que o estudante acertou na prova. Em cada uma das quatro áreas avaliadas, a média obtida depende, além do número de questões respondidas corretamente, também da dificuldade das questões que se erra e se acerta, e da consistência das respostas. Por isso, pessoas que acertam o mesmo número absoluto de itens podem obter médias de desempenho distintas.
O que representa a nota
Na escala construída para o Enem, dentro de cada uma das áreas avaliadas, a nota 500 representa a média obtida pelos concluintes do ensino médio que realizaram a prova (excluídos os egressos e treineiros). Portanto, quanto mais distante de 500 for a nota do estudante, para cima, maior o desempenho obtido em relação à média dos participantes. Mesmo raciocínio vale para desempenho menor que 500, que aponta desempenho pior em relação ao obtido pela média.
Escala
Os limites da escala, dentro de cada área, variam conforme o nível de dificuldade das questões da prova e o comportamento dos estudantes em cada questão. Portanto, o mínimo e máximo para cada área avaliada não são pré-fixados.
Na prova de Ciências da Natureza e suas Tecnologias, a análise TRI apontou que a menor média de proficiência observada foi 263,3. Esse número representa o início da escala para essa área, ou seja, o nível mais baixo de proficiência possível de mensuração pelas questões da prova. A maior proficiência foi 903,2.
Para Ciências Humanas e suas Tecnologias, as notas variam entre 300,0 e 887,0.
Para a área de Linguagens, Códigos e suas Tecnologias, as médias ficam entre 224,3 e 835,6.
No caso de Matemática e suas Tecnologias, as notas vão de 345,9 a 985,1.


Enem 2009 – Menor e maior nota TRI observada

Área do conhecimento Menor nota TRI observada Maior nota TRI observada
Ciências da Natureza e suas Tecnologias 263,3 903,2
Ciências Humanas e suas Tecnologias 300,0 887,0
Linguagens, Códigos e suas Tecnologias 224,3 835,6
Matemática e suas Tecnologias 345,9 985,1

Enem 2009 – Distribuição dos participantes ao longo das faixas de desempenho, por área
Matemática
Percentual acumulado
Abaixo de 300 0
300-400 14,3
400-500 57,7
500-600 85,2
600-700 95,2
700-800 99,3
800-900 100,0
Acima de 900 100,0
Total 100,0
Linguagens
Percentual acumulado
Abaixo de 300 1,3
300-400 14,5
400-500 47,0
500-600 82,3
600-700 97,9
700-800 100,0
800-900 100,0
Acima de 900 100,0
Total 100,0
Ciências da Natureza
Percentual acumulado
Abaixo de 300 0,8
300-400 13,3
400-500 48,7
500-600 83,7
600-700 97,2
700-800 99,8
800-900 100,0
Acima de 900 100,0
Total 100,0
Ciências Humanas
Percentual acumulado
Abaixo de 300 0
300-400 14,7
400-500 49,8
500-600 80,2
600-700 96,4
700-800 99,9
800-900 100,0
Acima de 900 100,0
Total 100,0
Enem 2009 – Média observada na Redação: 601,5
*Com alterações às 19:40 do dia 28/01/10
Assessoria de Imprensa do Inep/MEC 

ENEM - Presidente do Inep explica exame 2010

Comentário Moisés Basílio: Está chegando a hora do novo Enem. Abaixo o presidente do Inep explica em linha gerais o que vem a ser o novo Enem. Axé!

Fonte: Jornal "O Estado de S. Paulo" de 21 de setembro de 2009 - página A14

'Melhor chutar que deixar em branco'

Responsável pelo Enem, presidente do Inep nega sistema antichute

Renata Cafardo - O Estado de S. Paulo

BRASÍLIA - Ainda há esperança para os vestibulandos. Por mais tecnológica e moderna que seja a nova versão do Exame Nacional do Ensino Médio (Enem), é possível lucrar chutando questões que não se sabe a resposta. O sofisticado modelo estatístico usado pelo Ministério da Educação (MEC) na prova deste ano fez surgir especulações e dúvidas sobre o que fazer para se sair bem. Mas o criador do novo Enem, Reynaldo Fernandes, presidente do Instituto Nacional de Pesquisas e Estudos Educacionais (Inep), garante que ainda é melhor escolher uma das alternativas do que deixar a questão em branco.
A afirmação parece óbvia para quem está acostumado ao modelo clássico de vestibulares, em que o número de questões corretas determina a nota. No novo Enem, será levado em conta também quais delas foram respondidas certo ou errado. Esse padrão de respostas do candidato determina em que ponto da escala de notas ele está.

"A nota é um modelo estatístico. Ele (o sistema) não vai pegar o número de questões, é uma outra lógica. Uma pessoa que erra itens fáceis e acerta uns difíceis teve sorte. Não é provável que ela esteja no ponto alto da escala", diz. Por isso, uma questão acertada fora do padrão – um chute – vale menos. "Mas se ele tivesse errado também não ia melhorar a vida dele. Seria até pior."

O Enem será nos dias 3 e 4 de outubro e terá 180 questões. Com a mudança, 24 universidades federais usarão a prova como seu único vestibular. Segundo Reynaldo, os participantes não receberão uma média da prova e sim uma nota para cada uma das quatro áreas: Linguagens e Códigos, Matemática, Ciências da Natureza e Ciências Humanas. "Não existe mais a informação: ‘Tirei tantos no Enem’", diz. O exame também será dividido em três blocos, de perguntas fáceis, médias e difíceis. Leia a seguir trechos da entrevista.

Com essa nova tecnologia de prova, como o aluno vai saber a nota que ele tirou ao sair do exame?
Ele não vai saber. Sabe o que ele acertou e o que errou. Sabe o gabarito da prova, mas não vai saber a nota porque ela não é a proporção de acertos.

Quando ele vai saber?
Depois de dois meses. Todo o processo de seleção das universidades só começa depois de divulgado o resultado final. O prazo para divulgação da parte objetiva é 4 de dezembro, a redação será em janeiro. Isso vai para a casa dos alunos e vai estar na internet.

Como a universidade vai usar essa nota para seleção?
São quatro provas. Eu vou dar a escala e a universidade que define o limite para cada curso. É como o Toefl (exame dos EUA para avaliação de inglês). A escala vai de 0 a 660. Então, para ser aceito, a universidade define quantos pontos ela acha que deve ser o mínimo.

Elas estão preparadas para isso?
A gente dá uma ideia para elas da média dos alunos no pré-teste (exame que funcionou como um teste do Enem e foi feito por alunos do ensino médio). Com o tempo, elas vão aprendendo. Mas escolas muito concorridas, como as federais, vão pegar os melhores. Não vai ter efeito nota de corte. Na verdade, ela vai ver quantas vagas ela tem. Por exemplo, tenho cem vagas e vejo quais os cem melhores classificados. O Inep vai oferecer cinco notas, uma de cada área e a redação. A universidade vai definir o peso de cada uma. Na Engenharia, vai dar mais peso para matemática. Com base nisso, o sistema vai calcular uma nota geral para aquele curso. As universidades estão sendo treinadas agora para usar o sistema. Mas eu acho que no começo eles vão dar peso igual para as áreas. Mas depois vão aprendendo e vão mudando.

O aluno vai receber sua média geral da prova?
Não vai ter média geral, só a nota de cada uma das áreas. Serão quatro provas: linguagens, códigos e suas tecnologias; matemática; ciências da natureza e suas tecnologias e ciências humanas e suas tecnologias. As escalas não são comparáveis. Não existe mais a informação: "Tirei tantos no Enem". Acho que vai ter necessidade da média só na divulgação por escola do Enem, mas não pensei ainda como fazer. O aluno, se quiser, soma e divide por quatro.

O aluno vai poder mudar a escolha do curso depois de ter sua nota?
Sim, ele pode fazer opções depois de fazer a prova. A instituição quer as pessoas com notas maiores. Você tem de simular um leilão. Entra no sistema e dá cinco opções; no dia seguinte, olha suas chances, vê que está em 180º e tem 100 vagas. Aí, troca a ordem, põe outras. Isso pode ser feito nas universidades que estão usando o Enem como exame único.

Como é a escala do Enem?
Estamos definindo a escala. Deve ser de 0 a 100 ou 0 a 1000. A nota de TRI (Teoria de Resposta ao Item, metodologia usada na prova) é aberta. Vai de menos infinito a mais infinito. Porque ela não tem quantidade, ela só tem ordenação.

E o mecanismo contra chute?
Não existe um sistema mágico de identificar as pessoas que chutaram. Mas ele olha padrões prováveis e improváveis. Então, se uma pessoa acerta todos os itens fáceis, médios e acerta um dos difíceis, é bem provável que ela saiba essa, não tenha chutado. Se ela erra os fáceis, erra quase todos os médios e acerta um difícil, ele (o sistema) fala: "Esse cara teve sorte aqui."

A questão é considerada errada?
Não, mas vai ter um peso menor. Há uma escala de notas e olha-se em qual ponto é mais provável que o aluno esteja. A nota é um modelo estatístico. Não vai pegar o número de questões, é uma outra lógica.

Mas esse ponto na escala tem uma representação numérica.
Sim, a representação é a nota dele, mas se ele tivesse errado também não ia melhorar a vida dele. Ia ser até pior. Então não é verdade que não adianta chutar, que é melhor deixar em branco. Mas há um mecanismo de identificar padrões de prova. Qual ponto da escala de 0 a 100 é mais provável que você esteja com essa conduta de respostas? É nesse ponto "x", esta é sua nota.

Com a mudança deste ano, foram adicionados conteúdos a uma prova que só cobrava competências e habilidades?
Não tem prova sem conteúdo. A questão é como tratar os conteúdos. Eu posso aferir se você tem conhecimento. Quem descobriu o Brasil? Pedro Álvares Cabral. Mas compreensão não tem nada a ver com certo e errado. Outra coisa é gerar o que chamamos de habilidade, capacidade de usar aquele conhecimento para realizar tarefas. Não quero saber o que você está aprendendo na escola e sim como você usa o que aprendeu na escola para a vida. Isso é o Pisa (exame internacional feito pela OCDE) e é a mudança radical em exames. Já existia conteúdo no Enem. Mas as habilidades eram muito voltadas para língua, interpretação de texto e escrita e algumas de matemática, mais simples. Estamos aumentando um pouco o grau de dificuldade nas provas e incluindo humanidades e ciências. Não caía praticamente física no Enem. Era uma prova de simples para média. E agora teremos questões mais difíceis.

O Enem então está mais difícil?
Teremos um terço das questões mais simples, um terço médias e um terço difíceis. A gente espera que as questões fáceis o pessoal de Medicina faça muito rápido. Os blocos são identificados. Primeiro vêm as mais fáceis, depois médias e depois difíceis. E as provas vêm separadas por área.

Está pronta a prova?
Está. Eu não vi. A prova final, só umas quatro pessoas viram.

O ministro Fernando Haddad viu a prova?
O ministro não pediu para ver e eu não deixaria. A prova é tecnicamente construída. Dou muita entrevista, por isso não quero ver. Vou ver só no dia. Os montadores fazem a prova de acordo com as habilidades e as dificuldades. É muito técnica a montagem da prova.

Você já disse que o número de questões ainda é alto. Pensa em diminuir?
Vai depender muito da capacidade de discriminar. Tenho de discriminar pessoas muito diferentes. Por isso, quanto mais, melhor. Por exemplo, estou fazendo a prova de salto em altura: eu tenho de pôr sarrafo em várias alturas para discriminar os meninos iniciantes e os melhores atletas. Evidente que, se eu tivesse uma população mais homogênea, não precisava. Para o cara que vai prestar Engenharia, Medicina, não precisava das questões fáceis. Mas aí não consigo discriminar os de EJA (antigo supletivo). Mas acho que vamos discriminar melhor que qualquer vestibular. É impressionante como os nossos vestibulares, tirando a parte de conteúdo, são muito tradicionais na parte técnica. Eles são iguais ao que eram nos anos 70, uma prova clássica. Em alguns que visitei, que prefiro nem falar, as pessoas desconheciam essas tecnologias. O business deles é o vestibular e eles não conhecem metodologias modernas.

Como vê a possibilidade de a USP aderir ao Enem?
É importante, a entrada dela no sistema é um peso grande. Com uma grande adesão, começa a ficar estranho não aderir. Ninguém é obrigado a usar o SAT nos Estados Unidos, mas por que não usá-lo? A Unifesp vai adotar e vai receber a nata dos alunos do Brasil inteiro. Para a USP seria ótimo. Penso que toda grande universidade do mundo quer trazer os melhores alunos. As principais dos EUA vão buscar gente fora do país. Se tem um sistema nacional, é um ganho. Mas essas universidades têm estrutura de vestibular muito sólida, muito antigas.

Como vai ser a identificação do aluno na prova?
Tem o nome, todos eles têm o CPF, que foi fundamental para a gente, é o único numero nacional que permite identificar pessoas. Preciso que cada pessoa esteja ligada a um único número. Mas teremos o processo de caligrafia. Vai ter um campo só para escrever uma frase e, caso necessário, posso usá-lo. Eu posso chamá-lo depois, para checar a caligrafia.