TRI - Teoria de Resposta ao Item

Uma visão geral da Teoria de Resposta ao Item

TRI e suas principais aplicações

1. O que estamos medido?

• Traço latente: caracteristica que só pode ser medida indiretamente.

• Característica não observável.

• Cumulativo ou não cumulativo.

Ex: Altura não é traço latente porque posso medir diretamente

2. Exemplos de traço latente.

• Grau de satisfação

• Grau (Estado) de depressão

• Nivel de qualidade de vida

• Nivel de usabilidade da web

• Potencial empreendedor

• Qualidade do consumo alimentar(nutrição)

• Nível (grau) de conforto (em aeronaves)

• Grau de maturidade das empresas quanto às tecnologias de gestão

3. Como medir?

• Instrumento de medida: questionário, prova, teste

• Item: Cada questão de um questionário, prova, teste.

Escala: métrica, regua

Posso usar um questionário já validado e ajustar a TRI.

Teoria Clássica dos Testes

Teoria Clássica dos Testes investiga as propriedades do conjunto de itens que constituem o teste. Na TCT, o todo é o mais importante. Ao construir o instrumento, pensa-se na prova completa, em que cada questão constrói um conjunto coeso e que pode colaborar para uma análise de domínio do conhecimento. O princípio básico dessa teoria é que, quanto mais acertos, maior o domínio. O foco, então, é a quantidade de acertos do aluno, o escore total. Alunos submetidos a uma mesma prova ou a provas semelhantes (ditas paralelas) possuem seus resultados comparáveis, o que possibilita também comparações entre grupos.

Uma das principais vantagens da TCT é que ela é simples e eficiente. Não é preciso ser um especialista para calcular e compreender o resultado de uma avaliação com base na TCT. Além disso, essa teoria não exige pressupostos rigorosos, o que torna mais fácil aplicá-la em diferentes contextos.

Indices e coeficientes

• Índice de Dificuldade (Facilidade) – Proporção de respostas corretas em cada item;
• Indice de Discriminação – É a diferença entre a proporção de acertos dos participantes com maior habilidade (27% dos respondentes com pontuações mais altas) e a proporção de acertos dos participantes com menor habilidade (27% dos respondentes com pontuações mais baixas);
• coeficiente Ponto-bisserial – É a correlação de Pearson entre o desempenho no item dicotomizado, certo ou errado, e o desempenho no teste (em geral o Escore);
• coeficiente Bisserial – É uma transformação no coeficiente Ponto-bisserial. Neste caso, o desempenho no item dicotomizado, certo ou errado, tem distribuição Normal.

Exemplo: ENEM 2005

O ENEM 2005 consistiu em um teste com 63 itens de múltipla escolha (5 alternativas cada) envolvendo várias áreas do conhecimento. Extraiu-se uma amostra com 10.000 respondentes.

As respostas dos alunos e o Gabarito estão no arquivo ENEM2005.csv

You can also embed plots, for example:

Note that the echo = FALSE parameter was added to the code chunk to prevent printing of the R code that generated the plot.