Dissertação (mestrado)—Universidade de Brasília, Instituto de Ciências Exatas, Departamento de Matemática, Programa de Mestrado Profissional em Matemática em Rede Nacional, 2015. / Submitted by Fernanda Percia França (fernandafranca@bce.unb.br) on 2015-11-20T18:34:37Z No. of bitstreams: 1 2015_FredericoCarvalhoTôrres.pdf: 3332472 bytes, checksum: c0891878a308a0b47c58c6333796f5be (MD5) / Approved for entry into archive by Guimaraes Jacqueline(jacqueline.guimaraes@bce.unb.br) on 2016-01-07T15:32:21Z (GMT) No. of bitstreams: 1 2015_FredericoCarvalhoTôrres.pdf: 3332472 bytes, checksum: c0891878a308a0b47c58c6333796f5be (MD5) / Made available in DSpace on 2016-01-07T15:32:21Z (GMT). No. of bitstreams: 1 2015_FredericoCarvalhoTôrres.pdf: 3332472 bytes, checksum: c0891878a308a0b47c58c6333796f5be (MD5) / A elaboração de simulados é prática comum em escolas que desejam obter bons resultados e aprovar seus alunos nas grandes universidades brasileiras por meio de processos seletivos como o Exame Nacional do Ensino Médio (ENEM). Logo, faz-se necessário que os itens presentes nesses simulados sejam itens de qualidade, isto é, elaborados sob uma série de orientações pedagógicas e que permitam avaliar o desenvolvimento das competências e habilidades de seus alunos. Dessa forma, o trabalho propôs-se a analisar a qualidade dos itens aplicados em um simulado de matemática elaborado no modelo ENEM por uma escola do Distrito Federal. A análise dos itens foi feita utilizando-se a Teoria Clássica dos Testes (TCT) e a Teoria de Resposta ao Item (TRI), com a objetivo de fornecer um feedback aos professores elaboradores e possibilitar a criação de um banco de itens na escola. Concluiu-se que, apesar do descumprimento de algumas regras básicas quanto a elaboração de alguns itens, a maior parte do simulado é composta por itens que discriminam os alunos de alta proficiência dos de baixa proficiência. Há, ainda, itens que, sujeitos a pequenas melhorias, podem vir a compor o banco de itens da escola. Concluiuse, também, que o nível de dificuldade foi considerado elevado, bem acima do que se recomenda, que são níveis de dificuldade dos itens no teste dentro de uma curva normal. / The preparation of simulated tests is common practice in schools who wish to have good results and approve their students in major Brazilian universities through selective processes such as the Exame Nacional do Ensino Médio (ENEM). Therefore, it is necessary that the items present in these simulated tests are quality items, ie, prepared under a series of pedagogical guidelines that allows the evaluation of the development of skills and abilities of their students. Thus, the work aimed to analyze the quality of items applied in a simulated test of mathematics developed in ENEM model by a school at Distrito Federal. The analysis of the items was performed using Classical Theory of Tests (CTT) and Item Response Theory (IRT), with the goal of providing a feedback to the developers teachers and enable the creation of a items bank at school. It was concluded that, despite the failure of some basic rules for the preparation of some items, most of the simulated test consists of items that discriminate against students from high proficiency to low proficiency. There are also items that, subject to minor improvements, are likely to make the school’s items bank. Also, it was concluded that the difficulty level was considered high, well above what is recommended, which are levels of difficulty of the test items within a normal curve.

MAIA, José Leudo. Uso da Teoria Clássica dos Testes – TCT e da Teoria de Resposta ao Item – TRI na avaliação da qualidade métrica de testes de seleção. 2009. 325f. Tese (Doutorado em Educação) – Universidade Federal do Ceará, Faculdade de Educação, Programa de Pós-Graduação em Educação Brasileira, Fortaleza-CE, 2009. / Submitted by Maria Josineide Góis (josineide@ufc.br) on 2012-07-10T11:42:58Z No. of bitstreams: 1 2009_Tese_JLMaia.pdf: 4582126 bytes, checksum: 35b2f8279baa21b052a910889b5a7001 (MD5) / Approved for entry into archive by Maria Josineide Góis(josineide@ufc.br) on 2012-07-13T11:49:37Z (GMT) No. of bitstreams: 1 2009_Tese_JLMaia.pdf: 4582126 bytes, checksum: 35b2f8279baa21b052a910889b5a7001 (MD5) / Made available in DSpace on 2012-07-13T11:49:37Z (GMT). No. of bitstreams: 1 2009_Tese_JLMaia.pdf: 4582126 bytes, checksum: 35b2f8279baa21b052a910889b5a7001 (MD5) Previous issue date: 2009 / sse trabalho doutoral tem como proposta fazer uso da Teoria Clássica dos Testes – TCT e da Teoria de Resposta ao Item – TRI como instrumentos na avaliação da qualidade métrica de testes de seleção, sob quatro aspectos de investigação: Análise da Validez do Construto; Análise Psicométrica dos Itens; Funcionamento Diferencial dos Itens – DIF; e Função de Informação. Para tanto, foram utilizados dados dos resultados das provas de Português e Matemática do concurso vestibular da Universidade Estadual do Estado do Ceará – UECE, de 2007, em que participaram 20.016 candidatos a 38 Cursos de Graduação, somente na Capital do Estado. Para o tratamento desses dados, foram utilizados os seguintes softwares: SPSS, v15; BILOG-MG, v3.0; MULTILOG FOR WINDOWS, v1.0; e o TESTFACT v4.0. A primeira providência foi verificar a dimensionaidade dessas provas. Para tanto se utilizou o Método de Kaiser-Guttman, Scree-plot, e o Método das Cargas Fatoriais e das Comunalidades da Matriz de Fatores. A constatação foi de que a prova de Português apresentava características multidimensionais, sendo, portanto, descartada, por não atender aos pressupostos básicos da Unidimensionalidade e Independência Local dos Itens. A prova de Matemática, no entanto, por apresentar comportamento unidimensional, se tornou o foco deste trabalho. A análise da Validez do Construto foi realizada por meio dos coeficientes Alpha de Cronbach e Kuder-Richardson, tendo gerado valores iguais a 0,685, além da utilização, também, do método das Cargas Fatoriais, com cargas entre 0,837 e 0,960, indicando intensa consistência interna. A análise psicométrica dos itens foi realizada por meio dos índices de dificuldade, discriminação e acerto ao acaso, para ambas as teorias, indicando ser essa uma prova de dificuldade mediana, com bom comportamento discriminativo e baixo índice de acerto ao acaso. A análise do DIF foi realizada, segundo o gênero dos candidatos, pelos métodos Delta-plot, Maentel-Haenszel, Regressão Logística e Comparação dos Betas, indicando resultados estatísticamente não significativos, no que se concluiu não apresentar, a prova, comportamento diferenciado, segundo o gênero. A análise da Função de Informação da prova permitiu se observar que esta é particularmente válida para candidatos com aptidão em torno de 0,8750 e que, a um nível de confiança de 95%, 49,3% dos candidatos atenderiam a essa indicação. Observou-se também que 90,6% dos candidatos, em ambos os processos, apresentaram o mesmo nível de aptidão, indicando uma convergência bastante razoável entre os resultados gerados pela TCT e TRI, no entanto, no estudo amostral, a TRI identificou que 9,4% dos candidatos apresentaram maior aptidão para a realização de um curso superior que os selecionados pela TCT.