Submitted by TÂNIA ROBASKIEWICZ CONEGLIAN FUJII (taniaconeglian@hotmail.com) on 2018-07-05T02:38:14Z No. of bitstreams: 1 dissertação_tânia_fujii.pdf: 9736559 bytes, checksum: 96a18fba83fc563e110d05ccc897d764 (MD5) / Approved for entry into archive by ALESSANDRA KUBA OSHIRO ASSUNÇÃO (alessandra@fct.unesp.br) on 2018-07-05T12:58:24Z (GMT) No. of bitstreams: 1 fujii_trc_me_prud.pdf: 9736559 bytes, checksum: 96a18fba83fc563e110d05ccc897d764 (MD5) / Made available in DSpace on 2018-07-05T12:58:24Z (GMT). No. of bitstreams: 1 fujii_trc_me_prud.pdf: 9736559 bytes, checksum: 96a18fba83fc563e110d05ccc897d764 (MD5) Previous issue date: 2018-05-07 / Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES) / Neste trabalho realizou-se um estudo sobre construção de escalas, com base na Teoria da Resposta ao Item (TRI), resultando na construção e interpretação pedagógica de uma escala de conhecimento para medir a proficiência em conteúdos matemáticos, necessários para o acompanhamento das disciplinas de cálculo e similares dos ingressantes nos cursos da área de exatas. O modelo matemático adotado nesta pesquisa foi o logístico unidimensional de três parâmetros. A estimação dos parâmetros dos itens e das proficiências dos respondentes foi feita sob enfoque bayesiano, utilizando-se o amostrador de Gibbs, algoritmo da classe dos Métodos de Monte Carlo via Cadeia de Markov (MCMC), implementado via software OpenBUGS (Bayesian inference Using Gibbs Sampling), direcionado para análise bayesiana de modelos complexos. O software BILOG-MG também foi utilizado para comparação dos resultados. O instrumento utilizado para a medida do conhecimento consistiu em uma prova composta por trinta e seis itens de múltipla escolha, cada um com cinco alternativas, sendo somente uma a correta. Os itens foram elaborados com base em uma matriz de referência construída para este fim, dividida em três temas, sendo estes “espaço e forma”, “grandezas e medidas” e “números e operações/álgebra e funções”. Cada tema é composto por competências e cada competência descreve uma habilidade que se deseja medir. Para a construção da escala proposta, optou-se por adotar uma escala com média 250 e desvio padrão 50. Nesta escala foram selecionados níveis para serem interpretados em um intervalo de 75 a 425. Para interpretação da escala proposta, foram comparados alguns métodos de posicionamento de itens âncora nos níveis selecionados. Buscando a interpretação da escala, em toda a sua amplitude, optou-se por utilizar a análise de agrupamentos hierárquicos para segmentar a escala em grupos, ou seja, em faixas de proficiência. A escala foi dividida em cinco grupos, cada grupo caracterizado com base nos itens posicionados como âncora, a partir de suas probabilidades de resposta correta e de seus valores para o parâmetro de discriminação. Embora os resultados sejam consistentes, apontam para a necessidade de um processo contínuo de aprimoramento do banco de questões e da escala de proficiência. / In this work, a study was carried out on the construction of scales, based on the Item Response Theory (IRT), resulting in the construction and pedagogical interpretation of a scale of knowledge to measure the proficiency in mathematical contents, necessary for the follow-up of Calculus and similar subjects of the students in the courses of the Exact Sciences Area. The mathematical model adopted in this research was the three parameters one-dimensional logistic. The parameters estimation of the items and proficiencies of the respondents was done using a Bayesian approach using the Gibbs sampler, Monte Carlo Methods via Markov Chain algorithm (MCMC), implemented using OpenBUGS software (Bayesian inference Using Gibbs Sampling), directed to Bayesian analysis of complex models. The BILOG-MG software was also used to compare the results. The instrument used for the measurement of knowledge consisted of a test composed of thirty-six multiple choice items, each with five alternatives, with only one correct. The items were elaborated based on a reference matrix constructed for this purpose, divided in three themes, being these “space and form”, “quantities and measures” and “numbers and operations/ algebra and functions". Each subject is composed of competencies and each competency describes a skill that one wishes to measure. In order to construct the proposed scale, we chose to adopt a scale with a mean of 250 and standard deviation of 50. In this scale, we selected levels to be interpreted in a range of 75 to 425. For the interpretation of the proposed scale, some methods of positioning anchor items at the selected levels were compared. In order to interpret the scale in all its amplitude, it was decided to use hierarchical groupings analysis to segment the scale into groups, that is, in skill bands. The scale was divided into five groups, each group was characterized based on the items positioned as anchor, from their correct response probabilities and their values for the discrimination parameter. Although the results are consistent, they point to the need for an ongoing upgrading process of questions bank and proficiency scale.

Orientador: Prof. Dr. Valdecir Marvulle / Dissertação (mestrado) - Universidade Federal do ABC, Programa de Pós-Graduação em Mestrado Profissional em Matemática em Rede Nacional, 2016. / Este trabalho tem como objetivo analisar as deficiências no conhecimento em matemática nos alunos do primeiro ano do Ensino Médio utilizando como ferramenta de análise a Teoria da Resposta ao Item (TRI) em um teste com alunos de uma escola Estadual da Zona Leste de São Paulo. Apresentamos também os resultados do uso da TRI em um questionário aplicado a alunos universitários, versando sobre várias situações que implicaria em ações de sorte ou azar. Para que fosse possível a utilização da TRI, transformamos essas questões em itens dicotômicos com 2 parâmetros e utilizamos o pacote R para realização dos cálculos. / This essay has an objective to analyze all deficiencies in Math knowledge in all student from the first year of High School using as an analysis tool the Item Response Theory (IRT) in a test using students of a Public School of the East Side of São Paulo city. We had also presented the results of IRT use in a questionnaire given to college students, explaining about situations, which would provide actions concerning lucky and unlucky responses. In order to use IRT we had transformed these questions into dichotomous with two parameters and we also had a R pack to archive all calculations.

Made available in DSpace on 2016-06-02T20:30:58Z (GMT). No. of bitstreams: 1 6592.pdf: 1407244 bytes, checksum: c0910b430fa49682809b7e15747694e7 (MD5) Previous issue date: 2015-03-05 / Financiadora de Estudos e Projetos / The Brazilian Ministry of Education is effectively measuring text comprehension by the national evaluation called Prova Brasil. However, lowered averages performance recurrent propagation for the schools raises two assumptions: the first one, that students may not have fully learned previous repertoires, more basic, which might influence their performance in text comprehension measures; and the second one, is related to the fact that Prova Brasil presents an informative character, not having as main objective to provide specific teaching procedures linked to the measures used. This Prova Brasil feature make arduous for the teachers and coordinators to program interventions that produces improvements in this complex repertoire. Both studies of this work aimed to contribute with the discussion of these assumptions. In Study 1 basic reading and writing repertoires were characterized regarding regular and irregular isolated words for 5th grade students of three schools with low rates in Prova Brasil. The results indicated deficits for varied basic repertoires in the three schools, however, were observed most affected performances for writing under dictation and for irregular words. In Study 2, it was described the items construction that composed a reading comprehension assessment, based on a behavioral interpretation. Evidences for validity and reliability were also investigated by the items, using Item Response Theory (IRT). The results not only corroborate the low median performance presented at Prova Brasil by the students, but also allowed verify the validity and consistency of the items to evaluate intermediate reading comprehension repertoire. The two studies allowed mapping reading and writing repertoires, from basic to complex, showing the feasibility of the two evaluations to prescribe specific teaching procedures in order to remediate the deficits identified. / O Ministério da Educação vem medindo com eficácia a compreensão de textos pela avaliação nacional da Prova Brasil. Contudo, a recorrente divulgação de médias de desempenho defasadas para as escolas, levanta duas suposições: a primeira, de que os alunos podem não ter apreendido repertórios prévios, mais básicos, que possam influenciar seus desempenhos em medidas de compreensão de textos; e a segunda, relaciona-se com o fato de a Prova Brasil apresentar caráter informativo, não tendo por objetivo principal prover procedimentos de ensino específicos atrelados às medidas utilizadas. Esta característica da Prova Brasil pode dificultar a programação pelos professores e coordenadores de intervenções que acarretem melhoras neste complexo repertório. Os dois estudos deste trabalho pretenderam contribuir com a discussão sobre estas duas suposições. No Estudo 1 foram caracterizados repertórios básicos de leitura e escrita de palavras isoladas regulares e irregulares para alunos de 5º ano de três escolas com baixos índices na Prova Brasil. Os resultados indicaram déficits para variados repertórios básicos nas três escolas, contudo, foram observados desempenhos mais prejudicados para repertórios de escrita sob ditado e para palavras irregulares. No Estudo 2 descreveu-se a construção de itens para a composição de uma avaliação de compreensão de leitura, embasada por uma interpretação comportamental. Foram ainda investigadas evidências de validade e precisão dos itens pela Teoria da Resposta ao Item (TRI). Os resultados, além de corroborarem os desempenhos medianos a baixos apresentados pelos alunos na Prova Brasil, também permitiram verificar a validade e consistência dos itens para avaliar repertórios intermediários de compreensão de textos. Os dois estudos permitiram de maneira geral mapear repertórios de leitura e escrita, de básicos a complexos, apresentando a viabilidade das avaliações para prescrever procedimentos específicos de ensino visando remediação dos déficits identificados.

Submitted by Izabel Franco (izabel-franco@ufscar.br) on 2016-09-21T20:05:06Z No. of bitstreams: 1 DissVRS.pdf: 1534933 bytes, checksum: 3be53a846076f3dcad8ef3bbed2d3e3c (MD5) / Approved for entry into archive by Ronildo Prado (ronisp@ufscar.br) on 2016-09-28T18:36:30Z (GMT) No. of bitstreams: 1 DissVRS.pdf: 1534933 bytes, checksum: 3be53a846076f3dcad8ef3bbed2d3e3c (MD5) / Approved for entry into archive by Ronildo Prado (ronisp@ufscar.br) on 2016-09-28T18:36:38Z (GMT) No. of bitstreams: 1 DissVRS.pdf: 1534933 bytes, checksum: 3be53a846076f3dcad8ef3bbed2d3e3c (MD5) / Made available in DSpace on 2016-09-28T18:43:48Z (GMT). No. of bitstreams: 1 DissVRS.pdf: 1534933 bytes, checksum: 3be53a846076f3dcad8ef3bbed2d3e3c (MD5) Previous issue date: 2015-04-09 / Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES) / This work describes the steps for converting a linear paper-and-pencil English proficiency test for academic purposes, composed with multiple choice items that are administered following the admissible probability measurement procedure (Shuford Jr et al., 1966), adopted by the graduate program of Institute of Mathematical Sciences and Computing of University of São Paulo (ICMCUSP), Brazil, to a computerized adaptive test (CAT) based on an item response theory model (IRT). Despite the Institute recognizes reliable international English-language exams for academic purposes and non-native speakers, as TOEFL (Test of English as a Foreign Language), IELTS (International English Language Testing System) and CPE (Cambridge English: Proficiency), for instance, it is inconsistent that public universities in Brazil require them as certification because of the cost of approximately US$ 200.00 to US$ 300.00 per exam. The software TAI-PI (computerized adaptive test for English proficiency) was implemented in Java language, used SQLite as database engine, and it shall be offered free of charge for English proficiency assessment of the graduate students from October 2013. The statistical methodology employed for TAI-PI construction was defined considering the history and the aims of the evaluation and adopted the Samejima's graded response model (Samejima, 1969), the Kullback-Leibler information criterion for item selection, the expected a posteriori Bayesian estimation for latent trait (Baker, 2001) and shadow test approach (Van der Linden & Pashley, 2010) for test constraints (content and size of the test, for example). A description of the test design, the employed statistical methods, study results of a real application of TAI-PI to graduate students are presented in this work and the validation studies of the new methodology for pass/fail classi cation, highlighting the good quality of the new evaluation system and examination of improvement with the use of the methods of IRT and CAT. / Este trabalho descreve as etapas de transformação de um exame de proficiência em inglês acadêmico, aplicado via lápis-e-papel, com itens de múltipla escolha administrados segundo o método de Medida de Probabilidade Admissível (Shuford Jr et al., 1966), utilizado no programa de pósgraduação do Instituto de Ciências Matemáticas e de Computação da Universidade de São Paulo (ICMC-USP), em um teste adaptativo informatizado (TAI-PI) baseado em um modelo da Teoria de Resposta ao Item (TRI). Apesar do programa aceitar diversos exames que atestam a proficiência em inglês para indivíduos não-nativos de abrangência e reconhecimento internacionais, como o TOEFL (Test of English as a Foreign Language), IELTS (International English Language Testing System) e CPE (Certificate of Proficiency in English), por exemplo, a sua obrigatoriedade é incoerente em universidades públicas do Brasil devido ao custo que varia de 200 a 300 dólares por exame. O software TAI-PI (Teste Adaptativo Informatizado para Proficiência em Inglês), que foi desenvolvido em Java e SQLite, será utilizado para a avaliação da pro ciência em inglês dos alunos do programa a partir do segundo semestre de 2013, de forma gratuita. A metodologia estatística implementada foi definida considerando a história e objetivos do exame e adotou o modelo de resposta gradual unidimensional de Samejima (Samejima, 1969), o critério de Kullback-Leibler para seleção de itens, o método de estimação da esperança a posteriori para os traços latentes (Baker , 2001) e a abordagem Shadow test (Van der Linden & Pashley, 2010) para imposição de restrições (de conteúdo e tamanho da prova) na composição do teste de cada indivíduo. Uma descrição da estrutura do exame, dos métodos empregados, dos resultados das aplicações do TAI-PI a alunos de pós-graduação do ICMC e estudos de classificação dos alunos em aprovados e reprovados, são apresentados neste trabalho, evidenciando a boa qualidade da nova proposta adotada e aprimoramento do exame com a utilização dos métodos de TRI e TAI.

Submitted by Viviane Lima da Cunha (viviane@biblioteca.ufpb.br) on 2017-06-22T14:15:06Z No. of bitstreams: 1 arquivototal.pdf: 3580242 bytes, checksum: 63c3a2cbda0197a7117739490979581d (MD5) / Made available in DSpace on 2017-06-22T14:15:06Z (GMT). No. of bitstreams: 1 arquivototal.pdf: 3580242 bytes, checksum: 63c3a2cbda0197a7117739490979581d (MD5) Previous issue date: 2016-02-19 / Coordenação de Aperfeiçoamento de Pessoal de Nível Superior - CAPES / Usually, the people are well understood by somebody else, considering adjectives who describe their behaviour. This description or characterization is consider a singularity of these personality under your pairs. Some theoretical share the idea that traits are fundamental units of personality, presenting a high range of dispositions for answer the questions in certain ways. Therefore, the personality is a construct which strong influence under the behaviours, with influence in behaviours associate to healthy too. The Five Big Factors Associated with the Personality is considered a model well understood and with great replicability in many countries, who subsidized the formulation of instruments for personality rating. Taking this big concept for make a psicological evaluation, is necessary to use instruments that are not too long and whose items are easily understand by the subjects evaluated. Considering this needs and the importance of personality evaluation, the goal of this study was development and get evidences valid for a construct of a instrument for personality evaluation. Comparisons were made between two types of scale, one based on the Likert method and the other on the semantic differential method and another in differential semantic method. The research was count with a living togheter sample of 247 people in the Pilot Study and 571 attendees in the Final Study, of the both sexes and college students. The scales passed through semantic analysis with 10 subjects of lower extract of the population. It was also carried out the analysis of judges with three experts. In the Final Study were held 7 Factor Analyses (AF) for each scale, was also calculated Cronbach's alpha for each facet and dimensions in order to verify the reliability of the instruments. From the found psychometric results, it opted for the Semantic Differential scale to perform the analyzes of the items by the Item Response Theory. Therefore, the Semantic Differential Scale presented construct evidence of construct validity of as well as evidence of accuracy, be appropriate for personality evaluation. / Normalmente os indivíduos são caracterizados por outrem, levando em consideração adjetivos que descrevam seu comportamento. Essa descrição ou caracterização é considerada uma particularidade da personalidade daquele sujeito perante seus pares. Alguns teóricos compartilham a ideia de que os traços são unidades fundamentais da personalidade, representando disposições amplas para responder de determinadas maneiras. Dessa forma, a personalidade é um construto que tem forte influência sobre os comportamentos, influenciando também comportamentos em saúde. O modelo dos Cinco Grandes Fatores de Personalidade tem subsidiado a elaboração de instrumentos de avaliação da personalidade por ser considerado um modelo compreensivo de considerável replicabilidade em vários países. Para realizar uma avaliação psicológica levando em consideração este amplo conceito, faz-se necessária a utilização de instrumentos que não sejam demasiadamente longos, bem como instrumentos cujos itens sejam de fácil compreensão por parte dos sujeitos avaliados. Dadas as demandas e a relevância da avaliação da personalidade, o objetivo deste estudo foi desenvolver e obter evidências de validade de construto de um instrumento para a avaliação da personalidade. Foram realizadas comparações entre dois tipos de escalas de resposta, sendo uma baseada no método Likert e a outra no método do diferencial semântico. A pesquisa contou com uma amostra de conveniência de 247 sujeitos no Estudo Piloto e 571 participantes no Estudo Final, sendo eles sujeitos de ambos os sexos e universitários. Foi realizada a análise semântica das versões iniciais dos instrumentos com 10 sujeitos do extrato educacional mais baixo da população alvo. Também foi realizada a análise de juízes com três especialistas. O Estudo Piloto resultou na exclusão de itens a partir da análise do poder discriminativo dos itens. No Estudo Final foram realizadas 7 Análises Fatoriais (AF) para cada escala; também foi calculado o alfa de Cronbach para cada faceta e as dimensões com o objetivo de verificar a fidedignidade dos instrumentos. A partir dos resultados psicométricos encontrados, optou-se pela Escala de Diferencial Semântico para realizar as análises dos itens por meio da Teoria de Resposta ao Item. Dessa forma a Escala de Diferencial Semântico apresentou evidências de validade de construto, bem como evidências de precisão, sendo a mesma adequada para avaliação da personalidade.

Submitted by Viviane Lima da Cunha (viviane@biblioteca.ufpb.br) on 2017-07-04T14:28:14Z No. of bitstreams: 1 arquivototal.pdf: 1712614 bytes, checksum: 78cb9e405d0bdbe80ae2985eac174e54 (MD5) / Made available in DSpace on 2017-07-04T14:28:14Z (GMT). No. of bitstreams: 1 arquivototal.pdf: 1712614 bytes, checksum: 78cb9e405d0bdbe80ae2985eac174e54 (MD5) Previous issue date: 2017-02-16 / The child depression construct evaluated in the present study was one whose symptoms are associated with Major Depressive Disorder described in DSM-5. The purpose of this dissertation was to elaborate and validate an Inventory for Evaluation of Depression in Children. For this purpose, was applied to the Child Depression Inventory, developed and validated in this study, a sample of 211 children; divided into two groups: one with psychological service demands and another without this demand. The research was exploratory type, with data analysis of quantitative approach, based on the Classical Theory of Tests and the Theory of Response to the Item. Were performed Analyzes which made it possible to verify the psychometric evidence: Factorial Analysis of the main axes (PAF) with oblique rotation and Chronbach alpha indexes. PAF indicated a structure of 58 items with a correlation matrix composed of 7 factors, namely: 1. Self-destructive thoughts; 2. Apathy; 3. Euphoric feelings; 4. Irritability; 5. Feelings of utility; 6. Deep despondency; And 7. Psychomotor restlessness and retardation. These factors presented, in the great majority, a level of internal consistency above 0.70; and for the total set, 0.926. It was used Mann-Whitney U Test and t-test for independent samples in order to compare the two sets of samples. it was notes Significant statistical differences between them In both tests. The TRI analysis was done by the Gradual Response Model for polytomic items. Regarding parameter b (difficulty), of the total of items, only 3 were considered easy; 8 as medium and 16 considered extremely difficult (59.26%). For parameter a, item I11 was the most discriminatory and I29 or less. Factors 1, 4 and 5 were the ones that presented the best performance in providing information about the construct. After a TRI calculation, the instrument resulted in 27 items. Overall, the goal was achieved and the results described were informative. In general, it can be stated that the objectives of this dissertation have been reached. / O construto depressão infantil avaliado no presente estudo foi aquele cujos sintomas estão associados ao Transtorno Depressivo Maior descritos no DSM-5. O objetivo da presente dissertação foi elaborar e validar um Inventário para avaliação de Depressão em Crianças. Para tanto, foi aplicado o Inventário Depressão Infantil (IDI), elaborado e validado neste estudo, em uma amostra de 211 crianças; divididas em dois grupos: um com demandas de serviço psicológico e outro sem esta demanda. Esta pesquisa foi do tipo exploratória, com análise dos dados de abordagem quantitativa, embasada na Teoria Clássica dos Testes e na Teoria de Resposta ao Item. Foram realizadas análises que possibilitaram verificar evidências psicométricas: Análise Fatorial dos eixos principais (PAF) com rotação oblíqua e índices de alfa de Cronbach. A PAF indicou uma estrutura de 58 itens com uma matriz de correlação composta por 7 fatores, quais sejam: 1. Pensamentos autodestrutivos; 2. Apatia; 3. Sentimentos eufóricos; 4. Irritabilidade; 5. Sentimentos de utilidade; 6. Desânimo profundo; e 7. Agitação e retardo psicomotor. Tais fatores apresentaram, em sua grande maioria, nível de consistência interna acima de 0,70; e para o conjunto total, 0,926. Utilizou-se teste U de Mann-Whitney e t de student para amostras independentes a fim comparar os dois grupos de amostras. Pôde-se constatar diferenças significativamente estatísticas entre elas em ambos os testes. A análise da TRI foi realizada pelo Modelo de Resposta Gradual para itens politômicos. Sobre o parâmetro b (dificuldade), do total de itens, apenas 3 foram considerados fáceis; 8 como medianos e 16 considerados extremamente difíceis (59,26%). Sobre o parâmetro a, o item I11 foi o mais discriminativo e o I29 o menos. Os fatores 1, 4 e 5 foram os que apresentam melhor desempenho em dispor informação sobre o construto. Após a estimação de parâmetros da TRI, o instrumento resultou em 27 itens. De modo geral, pode-se afirmar que os objetivos da presente dissertação foram alcançados.

Institutional self-assessment is an important component of the Brazilian National Higher Education Assessment System (SINAES), which consists in an instrument for higher education institutions to identify their capacities and weaknesses. One of the activities inherent to institutional self-assessment is the performance evaluation of its professors. From this perspective, this study aimed to analyze the measuring instrument used on professor performance evaluation, applied to students of undergraduate courses at the Federal University of Santa Maria (UFSM). For this, the study was based on the statistical technique of Item Response Theory (IRT) to evaluate the construct reliability, its internal consistency and unidimensionality, and to estimate the items difficulty and discrimination parameters, by using the 2-Parameter Logistic Model (ML2). The IRT is a set of mathematical models that seeks to represent the probability of an individual to answer correctly to an item, depending on the parameters of this item and its ability. The data treatment and statistical tests were applied to a database containing over 20,000 evaluations, carried out in the first half of 2016, made available by the UFSM Data Processing Center. The results showed that the set of items has internal consistency, so as good build quality. The dimensionality test showed that the measuring instrument is one-dimensional, measuring a single latent trait, the professor's performance. The comparison of the estimated discrimination and difficulty parameters for the UFSM, with the estimated parameters for the ten Study Centers revealed that the items behavior is similar despite the different samples. The results also demonstrated that the measuring instrument applied to professor performance evaluation is statistically valid when subjected to the Item Response Theory analysis. / A autoavaliação institucional é um importante componente do Sistema Nacional de Avaliação da Educação Superior brasileira (SINAES), constituindo-se em um instrumento para que as Instituições de Ensino Superior identifiquem suas potencialidades e fraquezas. Uma das atividades inerentes à autoavaliação institucional é a realização da avaliação docente. Sob essa perspectiva, o presente trabalho se propôs a analisar o instrumento de medida da avaliação docente, aplicado aos discentes dos cursos de graduação da Universidade Federal de Santa Maria (UFSM). Para tanto, o estudo se baseou na técnica estatística da Teoria da Resposta ao Item (TRI) para avaliar a confiabilidade, a consistência interna e a unidimensionalidade do construto, além de estimar os parâmetros de dificuldade e discriminação do item, a partir da aplicação do Modelo Logístico de 2 Parâmetros (ML2). A TRI é um conjunto de modelos matemáticos que busca representar a probabilidade de um indivíduo responder positivamente a um item, em função dos parâmetros desse item e de sua habilidade. O tratamento e os testes estatísticos foram aplicados a uma base de dados contendo mais de 20.000 avaliações, realizadas no primeiro semestre de 2016, disponibilizada pelo Centro de Processamento de Dados da UFSM. Os resultados encontrados demonstraram que o conjunto de itens apresenta consistência interna, assim como boa qualidade de construção. O teste de dimensionalidade demonstrou que o instrumento de medida é unidimensional, medindo um único traço latente, o desempenho docente. A comparação dos parâmetros de discriminação e dificuldade estimados para a UFSM com os parâmetros estimados para os dez Centros de Ensino revelou que o comportamento dos itens é semelhante apesar das diferentes amostras. A partir dos resultados obtidos, concluiu-se que o instrumento de medida aplicado na avaliação docente pelos discentes da instituição apresentou validade estatística quando submetido aos testes da Teoria da Resposta ao Item.

Made available in DSpace on 2015-05-08T14:53:34Z (GMT). No. of bitstreams: 1 arquivototal.pdf: 3084707 bytes, checksum: 37ffb4be86e7f959d552839415551890 (MD5) Previous issue date: 2014-02-25 / Coordenação de Aperfeiçoamento de Pessoal de Nível Superior / The integration is highlighted in the literature as essential characteristic to the supply chain management (SCM), once aligned to strategic decisions, it produces more effective results, increases sensitivity to customer needs, decreases the response time to market changes and other factors that lead to increased performance of the chain as a whole. However, although the importance of integration is widely recognized, there is still much disagreement regarding its definition and therefore, difficult to measure the level of integration among members of a supply chain, making it difficult to evaluate the current chain state as well as the possibility of improvement. Thus, this research aims at developing a scale to measure the level of integration among members of a supply chain, focusing on upstream relationships, using the Item Response Theory (IRT). For this purpose we sought to identify the characteristics of integration through situations that indicate their existence by the following steps: 1) development of a scale to measure the level of integration with among members upstream the chain, based on the characteristics of integration identified in the literature review: confidence, information sharing, partnership, cooperation, coordination and collaboration, 2) preparation of items with situations that indicate the existence of these aspects in the relationship among members, building a scale to measure the level of integration between company and supplier, 3) measuring the level of integration of the companies participating in the research. The definition of the level of integration indicated by each item allowed the confirmation of the existence of a cumulative relationship among features of integration, based on the confidence that enables the sharing of information, followed by partnership and cooperation, coordination and collaboration among members. / A integração é destacada na literatura como uma característica essencial à gestão de cadeia de suprimentos (SCM), uma vez que, alinhada às decisões estratégicas, produz resultados mais eficazes, aumenta a sensibilidade às necessidades dos clientes, diminui o tempo de resposta às variações de mercado, entre outros fatores que levam ao aumento do desempenho da cadeia como um todo. No entanto, embora a importância da integração seja amplamente reconhecida, ainda existe muita divergência em relação à sua definição e, com isso, dificuldade em mensurar o nível de integração entre os membros de uma cadeia de suprimentos, dificultando a avaliação do estado atual da cadeia, bem como a possibilidade de melhoria. Nesse sentido, esta pesquisa tem como objetivo desenvolver uma escala para mensurar o nível de integração entre os membros de uma cadeia de suprimentos, com foco nas relações à montante, utilizando a Teoria de Resposta ao Item (TRI). Com este propósito, buscou-se identificar as características de integração por meio de situações que denotam a existência destas, seguindo as etapas descritas: 1) desenvolvimento de uma escala para mensurar o nível de integração com os membros à montante na cadeia, baseada nas características de integração identificadas na revisão da literatura: confiança, compartilhamento de informações, parceria, cooperação, coordenação e colaboração; 2) elaboração de itens com situações que denotam a existência destes aspectos na relação entre os membros, construindo uma escala para mensurar o nível de integração entre empresa e fornecedor; 3) mensuração do nível de integração das empresas participantes da pesquisa. A definição do nível de integração indicado por cada item permitiu a comprovação da existência de uma relação cumulativa entre as características de integração, tendo a confiança como base que possibilita o compartilhamento de informações, em seguida a parceria e a cooperação, coordenação e colaboração entre os membros.

O uso de provas elaboradas na forma de itens, em processos de avaliação para classificação, é uma herança histórica dos séculos XVI e XVII, ainda em uso nos dias atuais tanto na educação formal quanto em processos seletivos, a exemplo dos exames vestibulares. Elaboradas para mensurar conhecimentos, traços latentes que não podem ser medidos diretamente, as provas costumam ser corrigidas considerando unicamente o escore obtido pelo sujeito avaliado, sem contemplar informações importantes relacionadas aos itens das mesmas. O presente trabalho teve como objetivos: (i) utilizar a modelagem baseada na teoria da resposta ao item unidimensional - TRI e multidimensional - TRIM para construir escalas do conhecimento para a prova da FUVEST e (ii) classificar os candidatos aos seis cursos de graduação oferecidos pela Escola Superior de Agricultura \"Luiz de Queiroz\", unidade da Universidade de São Paulo, com base na escala construída. A hipótese imbutida no corpo do trabalho admitiu que o uso da TRIM classifica de forma diferente os candidatos que os atuais métodos utilizados pela FUVEST. Foram utilizados os padrões de respostas dos 2326 candidatos submetidos à prova, para que uma análise unidimensional fosse realizada, sob o enfoque da TRI, gerando uma escala de proficiências . Quatro traços latentes foram diagnosticados no processo avaliativo, por meio da modelagem multidimensional da TRIM, gerando uma escala das quatro dimensões. Uma proposta para classificação dos candidatos é apresentada, baseada na média das proficiências individuais ponderada pelas cargas fatoriais diagnosticadas pela modelagem. Análise comparativa entre os critérios de classificação utilizados pela FUVEST e pela TRIM foram realizados, identificando discordância entre os mesmos. O trabalho apresenta propostas de interpretação pedagógica para as escalas unidimensional e multidimensional e indica a TRIM como o critério complementar para classificação dos candidatos, valorizando informações individuais dos itens e, portanto, utilizando uma avaliação classificatória mais abrangente. / The use of elaborate exams in the form of items, in evaluation procedures for classification, is a historical legacy of the 16th and 17th centuries, still in use today both in formal education and in selective cases such as entrance examinations. Designed to measure knowledge, latent trait that can not be measured directly, the exams are usually corrected considering only the score obtained by the subject, without including important information related to the items of it. This study aimed to: (i) use the modeling approach unidimensional and multidimensional item response theory (IRT and MIRT, respectively), to build knowledge scales of the entrance examination FUVEST/2012; (ii) classifing candidates for the 6 undergraduate courses offered by the \"Luiz de Queiroz\" College of Agriculture , unit of the University of São Paulo, based on the scale then. The hypothesis supposes that the use of MIRT ranked candidates differently than current methods used by FUVEST. We used the patterns of responses of 2326 candidates submitted to the test, so that a one-dimensional analysis was performed under the IRT approach, generating a range of proficiencies. Four latent traits were diagnosed in the evaluation process by means of multidimensional modeling MIRT, generating a scale of four dimensions. A proposal for classification of the candidates is presented, based on the weighted average of the individual proficiencies by the factor loadings diagnosed by modeling. Comparative analysis of the classification criteria used by FUVEST and MIRT were performed by identifying discrepancies between them. This work presents the proposals of the pedagogical interpretation for one-dimensional and multidimensional scales and indicates the MIRT as additional criteria for the candidates, to valorize individual information of the items and therefore using a more comprehensive classification review.

CoordenaÃÃo de AperfeiÃoamento de Pessoal de NÃvel Superior / La investigaciÃn tuvo como objetivo detectar el funcionamiento diferencial del Ãtem (DIF) en dos tests de rendimiento - PortuguÃs y MatemÃticas - a travÃs del empleo de cuatro distintos procedimientos estadÃsticos: Mantel-Haenszel, CÃlculo del Ãrea entre las Curvas CaracterÃsticas de los Ãtems (CCIâs), ComparaciÃn del ParÃmetro b y el MÃtodo Estandarizado. Los resultados obtenidos indicaron que la cantidad de Ãtems con DIF sufrià un importante incremento cuando la variable âtipo de escuelaâ fue usada en la composiciÃn de los grupos estudiados, pero tambiÃn cuando las alternativas o distractores de los Ãtems estudiados poseian funcionamiento diferencial (DAF). AdemÃs, determinamos el grado de concordancia entre los mÃtodos en el proceso de diagnÃstico del DIF e identificamos sus principales limitaciones en la detecciÃn de los dos principales tipos de DIF - uniforme y no uniforme - en el Ãmbito de la TeorÃa de la Respuesta al Ãtem (TRI). AsÃ, sugerimos la adaptaciÃn del mÃtodo a las caracterÃsticas de las CCIâs de los Ãtems estudiados y, para ello, deberemos representar grÃficamente las CCIâs para los grupos comparados - el de referencia (GR) y el focal (GF) - y, posteriormente, eligir los mÃtodos mejor adaptados a las peculiaridades de las CCIâs, o sea, los mÃs eficaces para detectar el DIF.