Submitted by Julie_estagiaria Moraes (julie.moraes@fgv.br) on 2012-01-11T17:57:04Z No. of bitstreams: 1 000019619.pdf: 4071223 bytes, checksum: 1716f67bbf8446a88bdb2b0cd0960732 (MD5) / Made available in DSpace on 2012-01-11T17:57:21Z (GMT). No. of bitstreams: 1 000019619.pdf: 4071223 bytes, checksum: 1716f67bbf8446a88bdb2b0cd0960732 (MD5) Previous issue date: 1980 / Des etudes actuelles plus systematiques sur l'eva1uation en matiere d'education ont, succesivement, privilegie l'examen de son caractere technique. P1usieurs theoriciens ont adopte cette attitude, qui se resume a rendre operante la prati que de 1 'eva1uation, en indiquant une serie de procedures a etre suivies pour la rendre objective et efficaceo Au Bresi1, l'aplication de cette maniére de penser est une constante dans les ouvrages examines de quelques, specialistes en la matiere et apparait visiblement dans les directives provenant des organismes officiels d'education. Nous avons observe aussi bien dans un cas que dans,l 'autre, l'acceptation inconditionnel1e du cadre theorique defini dans 1es etudes de tendance techniciste, appliquees a l 'evaluation. A partir de ces constatations, nous avons essaye de mettre en rapport la tendance de presenter l'evaluation en education comme un probleme exclusivement technique et la matrice theorique qui 1 'engendre. Cette matrice a ete localisee dans le cadre de 1 'explication teleologique ou fonctionnelle subordonnee ã la logique formelle, dont le- contenu permet de justifier le traitement de l 'evaluation comme un probleme de caracteristiques a predominance techniques. Toutefois, l 'evaluation ainsi traitee reste soumise a quelques limites. Ce sont les limites provenant de la matrice theorique, adoptee par les specialistes de l'evaluation de tendance techiciste dont 1a partialite em pêche l'analyse de l'ensemble des implications incidents sur la pratique de l 'evaluation. A celles-la s'ajoutent les limites reelles. L'affranchissement des quelques limites imposees a 1 'evaluation educationnelle nous amene ã rechercher les fonctions sociales accompl ies par l'organisation scolaire dans l'ensemble des relations qui existent dans les societes. Dans ce contexte, il est possible d'attribuer ã l'evaluation l'accompl.!.s siment de plusieurs rôles selon la perspective politique quilui est attribuee de même qu'ã 1 'ecole. Mais le chemin de l 'affranchissement des restrictions de la pratique de 1 'evaluation se trouve dans 1 'ecole elle-même, quand elle se transforme en un instrument reel de formation de 1 'homme comme être collectif et qui participe effectivement de la construction de la societe. / Estudos atuais mais sistemáticos sobre avaliação educacional têm, sucessivamente, privilegiado o exame do seu carater técnico. Uma série de teóricos filiam-se a este tipo de postura que se resume em operacionalizar a prática de avaliaçao, indicando um conjunto de procedimentos a serem seguidos, para transformá-la num processo objetivo e eficaz. No Brasil, a projeção desse modo de pensar é uma constante nos escritos examinados de alguns estudiosos sobre o assunto, e se apresenta ostensivamente nas diretrizes emanadas dos órgãos oficiais de educação. Tanto num,como noutro caso, observa-se a aceitação incondicional do quadro teórico definido nos estudos de tendência tecnicista, projetados sobre a avaliação. A partir destas constatações tentou-se relacionar a tendência de apresentar a avaliação educacional como um problema de caráter exclusivamente técnico com a matriz teórica que o engendra. Esta matriz foi localizada no quadro de explicação teleológico ou funcional, subordinada à lógica formal, cujo conteúdo permite tornar legitimo o tratamento da avaliação como um problema de caracteristicas predominantemente técnicas. Porém, ao ser assim tratada, a avaliação fica sujeita a alguns limites. São os limites a ela impostos decorrentes da matriz teorica adotada pelos estudiosos da avaliação de tendência tecnicista, cuja parcialidade impede a análise do conjunto de implicações incidentes sobre a prática de avaliação. A estes somam-se os limites reais. A superação de alguns limites impostos à avaliação e ducacional ensejam a investigação, no conjunto de relações sociais vigentes nas sociedades, das funções sociais cumpridas pelo aparelho escolar. Neste contexto é possivel imputar a avaliação o desempenho de diferentes papéis conforme a perspectiva politica a ela atribuida e à escola. Mas o caminho de superaçao das restrições da prática de avaliação encontra-se na própria escola, quando ela se transforma no instrumento real de formação do homem enquanto ser coletivo e que participa efetivamente da construção da sociedade.

Tese (doutorado) - Universidade Federal de Santa Catarina, Centro Tecnológico, Programa de Pós-Graduação em Engenharia de Produção, Florianópolis, 2015. / Made available in DSpace on 2015-11-10T03:10:59Z (GMT). No. of bitstreams: 1 335977.pdf: 2551521 bytes, checksum: a289b7795b48b1e42626b2baacb1f55c (MD5) Previous issue date: 2015 / Esta tese apresenta um estudo sobre as avaliações com itens de respostas construídas em larga escala no contexto do modelo multifacetas de Rasch (LINACRE, 1989 apud LINACRE, 1994). Essas avaliações necessitam de avaliadores para julgar o desempenho das pessoas quanto à habilidade que está sendo medida por meio do teste. Entre as avaliações com itens de respostas construídas mais utilizadas no âmbito educacional e de seleção estão as provas das diversas disciplinas do Ensino Médio, as provas de redação do ENEM e dos concursos vestibulares e as provas com itens abertos de concursos para provimento de vagas de trabalho. Os resultados das avaliações com itens de respostas construídas não dependem apenas do nível de habilidade dos examinandos quanto ao construto avaliado e da dificuldade das tarefas, dependem também da severidade dos avaliadores que julgam os desempenhos e da estrutura da escala de classificação. Um dos principais problemas nessas avaliações é a pontuação de um mesmo desempenho com graus diferentes de severidade. Quando existem vários avaliadores, o ideal é que todos atribuam exatamente a mesma pontuação para os mesmos desempenhos observados, essa é a condição principal para se ter confiabilidade de pontuação. Entretanto, são muitos os fatores que podem causar variabilidade nessas pontuações. O modelo multifacetas de Rasch vem sendo cada vez mais utilizado para aferir a qualidade das avaliações com itens de respostas construídas, por permitir a inclusão de outras variáveis aos sistemas avaliativos, além da capacidade dos indivíduos e da dificuldade das tarefas. Algumas dessas variáveis consistem em importantes fontes geradoras de vieses nos processos avaliativos. Como exemplos têm-se as características pessoais dos avaliadores, as diferenças entre a severidade dos avaliadores, as tendências dos avaliadores em julgamentos sistemáticos, as diferenças entre as dificuldades de tarefas distintas e a variação quanto ao entendimento e utilização das categorias da escala de classificação por parte dos avaliadores. O modelo multifacetas de Rasch permite a inclusão de cada variável que pode interferir na avaliação, além de possibilitar análises para os efeitos causados por cada elemento que faz parte da avaliação individualmente, o que torna a utilização desse modelo muito vantajosa. O objetivo deste estudo é estabelecer como o modelo multifacetas de Rasch pode contribuir para a determinação da qualidade das avaliações com itens de respostas construídas. A abordagem utilizada pelo modelo multifacetas de Rasch proporciona análises sobre a qualidade das medidas relacionadas aos examinandos, aos avaliadores, às tarefas, aos itens e às escalas de classificação utilizadas para a pontuação das tarefas. Este trabalho também apresenta uma aplicação do modelo multifacetas de Rasch aos dados provenientes de uma avaliação real, na qual estabelece as principais análises sobre a qualidade dessa avaliação.<br> / Abstract : This thesis presents a study about the large-scale construct-response item evaluations in the context of the many-facet Rasch model (LINACRE, 1989 apud LINACRE 1994). These evaluations require raters in order to judge the performance of the people regarding the ability that is being measured through test. Among the evaluations with constructed-responses items most frequently used in the educational and hiring ambit are those with open questions of the disciplines of the High School, the writing test of the Brazilian High School National Exam and of the university entrance exams and the tests with open questions of contests. The results of the construct-response item evaluations do not depend only on the ability level of the examinants regarding the evaluated construct and the difficulty of the tasks; they depend also on the severity of the raters that judge the performance and the structure of the classification scale. One of the main problems of these evaluations is the rating of a same performance with different severity degrees. When there are many raters, it would be the ideal if all would give exactly the same rating for the same performances observed, this is the main condition in order to have reliability of rating. However, many are the factors that can cause variability in these ratings. The many-facet Rach model have been even more used to check the quality of the construct-response item evaluations, since it allows the inclusion of other variables to the evaluating systems, besides the capabilities of the individuals and the difficulty of the tasks. Some of these variables consists of important sources generator of biases in the evaluating processes. As examples are the personal characteristics of the raters, the differences between the severity of the raters, the tendencies of the raters in systematic judgements, the differences between the difficulties of the distinct tasks and the variation regarding the understanding and use of the categories of the classification scale by the raters. The many-facet Rach model allows the inclusion of each variable that can interfere in the evaluation besides allowing analyzes for the effects caused by each element that is individually part of the evaluation, which makes the use of the many-facet Rach model very advantageous. The objective of this study is to establish how the many-facet Rach model can contribute to the determination of the quality of the evaluations with construct-response items. The approach used by the many-facet Rach model provides analyzes on the quality of the measure related to the examinees, to the the raters, to the tasks, to the questions and to the classification scales used for the rating of the tasks. This work also presents an application of multi-faceted Rasch model to data from a real assessment, which establishes the main analyzes of the quality of the evaluation.

Dissertação (mestrado)—Universidade de Brasília, Instituto de Psicologia, Departamento de Processos Psicológicos Básicos, Programa de Pós-Graduação em Análise de Comportamento, 2013. / Submitted by Albânia Cézar de Melo (albania@bce.unb.br) on 2013-04-22T16:16:37Z No. of bitstreams: 1 2013_FlaviaAzevedoLacerda.pdf: 1369956 bytes, checksum: eb0523520b6da33366aed0ea9544ad85 (MD5) / Approved for entry into archive by Guimaraes Jacqueline(jacqueline.guimaraes@bce.unb.br) on 2013-04-23T12:14:54Z (GMT) No. of bitstreams: 1 2013_FlaviaAzevedoLacerda.pdf: 1369956 bytes, checksum: eb0523520b6da33366aed0ea9544ad85 (MD5) / Made available in DSpace on 2013-04-23T12:14:54Z (GMT). No. of bitstreams: 1 2013_FlaviaAzevedoLacerda.pdf: 1369956 bytes, checksum: eb0523520b6da33366aed0ea9544ad85 (MD5) / O presente estudo teve por objetivo avaliar o efeito do treino de resposta construída com modelo atrasado, com possibilidade de consulta a dicas, no desenvolvimento de leitura com compreensão e leitura recombinativa. Doze crianças pré-escolares, com idades entre 5 e 7 anos foram organizadas em dois grupos experimentais e um Grupo Controle. Os grupos experimentais foram expostos a seis ciclos, sendo que a cada ciclo eram realizados: treinos de pareamento de palavra ditada-figura e nomeação de figura (AB/BD) e de palavra ditada-palavra impressa e nomeação de palavras (AC/CD); e testes, com palavras de treino e de recombinação, de equivalência entre palavra impressa e figura (BC/CB e B'C'/C'B'), e testes de recombinação de pareamento palavra ditada-palavra impressa (A'C') e de nomeação (C'D). Para o Grupo I, foi inserido no Treino AC/CD a tarefa de resposta construída com modelo atrasado (CE), uma tela de acesso à dica e o teste de ditado com resposta construída (A'E), e para o Grupo II houve a omissão desse treino adicional. O Grupo Controle foi exposto apenas aos Treinos AB/BD e aos testes. Os resultados demonstraram emergência de leitura receptiva, leitura com compreensão e nomeação, apesar dos resultados da nomeação e do teste de ditado com resposta construída, terem sido inferiores comparados com as outras avaliações que envolviam tarefas de seleção. Os grupos experimentais obtiveram desempenhos superiores no Pós-Teste Geral comparado ao Grupo Controle. Não foi observado efeito diferencial da consulta a dicas nos treinos sobre o desempenho nos testes. A relevância desse trabalho se justifica por somar esforços na identificação de variáveis que afetam a leitura recombinativa. ______________________________________________________________________________ ABSTRACT / The present study aimed to evaluate the effect of training with delayed constructed response matching to sample in the development of reading comprehension and recombinative reading with possibility of consulting tips. Twelve preschool children, ages from 5 to 7 years old were organized into two experimental groups and one control group. The experimental groups were exposed to six cycles, with each cycle were performed: matching picture to dictated word and oral naming of the picture (AB/BD) and printed word to dictated word and oral naming of printed word (AC/CD); and tests, with training and recombination words, equivalence between printed word and picture (BC/CB and B'C '/C'B'), and recombination tests between printed word to dictated word (A'C') and oral naming of printed word (C'D). For Group I, was inserted into Training AC/CD a delayed constructed response task (CE), an access tip screen and the dictation test with constructed response (A'E); and for Group II there was an omission of this additional training. The control group was exposed only to Training AB / BD and to tests. The results showed emergence of receptive reading, reading comprehension and oral naming, despite the results of oral naming and constructed dictation test with constructed response, were lower compared with other reviews involving selection tasks. The experimental obtained a superior performance in General Post-Test compared to the control group. It was not observed differential effect of tips consultation during training on performance in tests. The relevance of this work is justified by joining efforts in identifying variables affecting recombinative reading.

Orientadora: Simone Aparecida Capellini / Banca: Célia Maria Giacheti / Banca: Clara Regina Brandão de Ávila / Resumo: Este estudo tem como objetivos traduzir e adaptar para a cultura brasileira o Detailed Assessment of Speed of Handwriting (DASH), e investigar o desempenho dos escolares na adaptação brasileira do procedimento. A fim de alcançá-los, dividiu-se este estudo em duas fases, sendo a fase 01, voltada para a adaptação, e a fase 02, voltada para a investigação. O procedimento metodológico da fase 01, seguiu as etapas: (1) avaliação de equivalências conceitual e de itens, e (2) avaliação da equivalência semântica. Como resultado da primeira etapa (1), verificou-se que por meio de revisões bibliográficas e discussões com os integrantes do comitê de juízes, que os conceitos e os itens são equivalentes nas duas culturas (Britânica e Brasileira). Na etapa 2, foi realizada a adaptação de uma frase para um pangrama na língua portuguesa e definiu-se o uso da letra cursiva na tarefa "Escrita do alfabeto". Verificou-se que a tradução foi válida e, portanto pôde-se elaborar a versão em português, a qual foi aplicada no estudo piloto com 32 escolares, sendo 4 para cada faixa etária estudada (de 9 a 16 anos), constatando-se fácil aplicabilidade, devido à aceitabilidade e a compreensão dos escolares nas tarefas propostas, não havendo necessidade de novos ajustes semânticos na versão adaptada do procedimento. A partir desses resultados, iniciou-se a fase 02, em que participaram 658 escolares de 05 escolas públicas, localizadas na cidade de Marília (SP) e região, que apresentavam idades entre 09 anos e 16 anos e 11 meses, divididos em oito grupos: 102 escolares no GI (09 anos), 99 no GII (10 anos), 86 no GIII (11 anos), 90 no GIV (12 anos), 87 no GV (13 anos), 68 no GVI (14 anos), 61 no GVII (15 anos) e 65 no GVIII (16 anos). A coleta foi realizada em grupos de 15 a 20 ... (Resumo completo, clicar acesso eletrônico abaixo) / Abstract: This study aimed to translate and adapt, for the Brazilian culture, the Detailed Assessment of Speed of Handwriting (DASH), and to investigate the performance of the students towards the Brazilian adaptation of the procedure. In order to achieve these goals, this study was divided into two steps: step 01 referring to adaptation and step 02 to investigation. The methodological procedure of step 01comprised: (1) Assessment of conceptual equivalence and items, and (2) assessment of semantic equivalence. As a result of step (1), it could be observed through bibliographic reviews and discussions with the members of the judgment committee, that the concepts referring to the items, were equivalent, for both cultures (British and Brazilian). In relation to step 2, it was realized the adaptation of one phrase, for the pangram in Portuguese language, and the employment of cursive handwriting, for the task "Alphabet writing". The translation was validated and, therefore the Portuguese version was applied in a pilot study with 32 students; 4 students for each age group studied (9-16 years), confirming the easy applicability, due to the acceptability and comprehension of the students about the proposed tasks, without necessity of new semantic adjustments concerning the adapted version of the procedure. From these results, phase 02 was initiated, in which participated 658 students, of 05 publics schools, located in Marilia city (SP) and region, whose ages ranged from 09 to 16 years old and 11 months, and were divided into eight groups: 102 students in GI (09 years old), 99 in GII (10 years old), 86 in GIII (11 years old), 90 in GIV (12 years old), 87 in GV (13 years old), 68 in GVI (14 years old), 61 in GVII (15 years old) and 65 in GVIII (16 years old). Data collection was realized in groups, from 15 to 20 ... (Complete abstract click electronic access below) / Mestre

Este trabalho é resultado de um estudo sobre a dimensão educativa da medida de Liberdade Assistida (LA) e suas possibilidades na busca pela (re)inserção social do adolescente autor de ato infracional, tendo como base a experiência do município de Porto Alegre. A coleta dos dados foi realizada a partir da leitura em profundidade dos processos de execução da medida, com ênfase nos relatórios e Planos de Atendimento, documentos produzidos pelos orientadores do Programa Municipal de Execução das Medidas Sócio- Educativas em Meio Aberto de Porto Alegre (PEMSE), responsáveis pelo acompanhamento direto dos adolescentes. Trabalhando a partir de uma perspectiva educacional, orientadores e adolescentes – educadores e educandos – ganharam lugar central na análise dos dados. Percebe-se, com o estudo, que a execução da medida de Liberdade Assistida está marcada por profundos desencontros entre adolescentes e orientadores e entre os procedimentos propostos no Plano de Atendimento e as necessidades, interesses e possibilidades dos seus destinatários. Isolados da sua circunstância, os adolescentes têm sido culpabilizados pelo desenrolar de suas histórias e, não menos sozinhos, são chamados a empreender as mudanças que lhes permitam trilhar um novo caminho distante da prática infracional. As idéias de responsabilidade e de necessidade perpassam toda a execução da medida, mas apenas a responsabilidade tem feito do adolescente o centro do processo. Quanto ao orientador da medida, tem reservado para si a função de encaminhar, controlar resultados e, ainda, propor momentos de reflexão para o adolescente, em especial, e para a sua família. / El presente trabajo es resultado de un estudio acerca de la dimensión educativa de la medida de “Liberdade Assistida” (LA) y sus posibilidades en la búsqueda por la (re)inserción social del adolescente autor de acto infraccional, con base en la experiencia del Municipio de Porto Alegre. La reunión de datos ha sido realizada a partir de la intensa lectura de los procesos de ejecución de la medida, con énfasis a los informes y “Planos de Atendimento”, documentos producidos por los orientadores del “Programa Municipal de Execução das Medidas Sócio- Edcuativas em Meio Aberto de Porto Alegre” (PEMSE), los responsables por el acompañamiento directo a los adolescentes. Trabajando desde una perspectiva educacional, los orientadores y adolescentes – educadores y educandos – conquistaron posición central en el análisis de los datos. Se pudo percibir, con el estudio, que la ejecución de la medida de “Liberdade Assistida” se encuentra marcada profunda incompatibilidad entre adolescentes y orientadores y entre los procedimientos propuestos en el “Plano de Atendimento” y las necesidades, los intereses y las posibilidades de sus destinatarios. Aislados de su circunstancia los adolescentes han sido culpabilizados por el desenrollo de sus historias y, no menos solos, son llamados a empreender los cambios que a ellos les permitan trillar un nuevo camino lejano de la práctica infracional. Las ideas de responsabilidad y necesidad van más allá de toda ejecución de la medida, pero sólo la responsabilidad ha hecho al adolescente el centro del proceso. Respecto al orientador de la medida, éste ha reservado a si mismo la función de encaminar, controlar resultados y, aún, proponerles al adolescente, en especial, y a su familia, momentos de reflexión.

Submitted by Kelly Ayala (kelly.ayala@fgv.br) on 2016-09-09T14:43:49Z No. of bitstreams: 1 0SUMÁRIO dissertação serviços.pdf: 54018 bytes, checksum: 82a0a94e2778b2ed53d1b43dcb54f23e (MD5) / Approved for entry into archive by Kelly Ayala (kelly.ayala@fgv.br) on 2016-09-09T14:47:29Z (GMT) No. of bitstreams: 1 0SUMÁRIO dissertação serviços.pdf: 54018 bytes, checksum: 82a0a94e2778b2ed53d1b43dcb54f23e (MD5) / Approved for entry into archive by Kelly Ayala (kelly.ayala@fgv.br) on 2016-09-09T17:00:35Z (GMT) No. of bitstreams: 1 0SUMÁRIO dissertação serviços.pdf: 54018 bytes, checksum: 82a0a94e2778b2ed53d1b43dcb54f23e (MD5) / Made available in DSpace on 2016-09-09T17:14:15Z (GMT). No. of bitstreams: 1 0SUMÁRIO dissertação serviços.pdf: 54018 bytes, checksum: 82a0a94e2778b2ed53d1b43dcb54f23e (MD5) Previous issue date: 2003 / O objetivo principal desta pesquisa é iniciar um processo de validação de uma escala de percepção de qualidade do serviço educacional prestado por uma instituição de ensino superior, por meio de uma avaliação de suas características psicométricas. A escala SERVPERF, adaptada para ensino servirá de base teórica para esta pesquisa. Tal pesquisa foi realizada com estudantes de graduação de administração de empresas e comunicação social de uma faculdade particular do Rio de Janeiro e de administração de empresas de uma universidade pública.

Submitted by Julie_estagiaria Moraes (julie.moraes@fgv.br) on 2012-01-27T14:31:09Z No. of bitstreams: 1 000019310.pdf: 2078944 bytes, checksum: 166dc59b3c79e317856c2f08e5d2e25c (MD5) / Made available in DSpace on 2012-01-27T14:31:39Z (GMT). No. of bitstreams: 1 000019310.pdf: 2078944 bytes, checksum: 166dc59b3c79e317856c2f08e5d2e25c (MD5) Previous issue date: 1981 / The need for developing adequate instruments to evaluate educational programs is quite urgente presently. According to recent studies in the field of educational measurements, this need is fulfilled by the criterion-referenced tests. The construction of two criterion-referenced tests to evaluate basic competences in the areas of reading and writing of MOBRAL's Functional Literacy Program was the objective of this study. Firstly, four basic competences were selected and described to be measured by each test. The selection of such competencies was based on the objectives of the in the Teacher's Manual (1977). Secondly, specifications for each selected in the two areas were created. Based on Program stated competence these specifications, thirty-two items for the reading test and fourty items for the writing test were constructed. Such items were randomly distributed into five experimental forms for each teste The reading test has multiple-choice items and the writing test has subjective answer. The correcting criteria of minimum standards of performance were established for each test. Means and standard deviations were the statistics used in the analysis of the tests. The results of this analysis allow these minimum standards of performance to be kept in subsequent studies. Test-item analysis was developed in two stages: (a) discriminatory rates were calculated in the traditiona1 way, and (b) sensitivity rates were calculated through the process developed by Gronlund (1976). The results of the studyallowed the utilization of all items. The items were divided into two equivalent forms for each test, each one subdivided into three subtests to assess an isolated measure of the described competence. In order to examine the validity, rates of descriptive validity and area selection were established. The reliability was assured with the construction of more than five items for Gronlund's competence (1976). / A necessidade de se desenvolverem instrumentos adequados a avaliação de programas educacionais é premente no momento atual. Segundo os estudos mais recentes no campo da medida educacional, os testes com referência a critério são os que atendem a esta necessidade. Este estudo teve por objetivo a construção de dois testes deste tipo para a avaliação do Programa de Alfabetização Funcional do MOBRAL nos dominios da aquisição das competências basicas em leitura e escrita. Inicialmente foram selecionadas e descritas quatro competências para serem medidas por cada teste. As competências foram selecionadas tendo como base os objetivos do programa apresentados no Roteiro de Orientação ao Alfabetizador (1977). A segunda etapa do estudo consistiu na criação das especificações para cada competência selecionadas nos dois dominios. A partir destas especificações foram construidos 32 itens para o teste de leitura e 40 para o de escrita. Estes itens foram, distribuidos randomicamente em 5 formas experimentais para cada teste. O teste de leitura é composto de itens de múltipla escolha e o teste de escrita de itens de resposta construida. Os criterios de correção e os padrões minimos de desempenho foram estabelecidos para cada teste. Para a analise destes padrões minimos foram calculados as medias e os desvios-padrão para cada forma aplicada. Estes resultados permitem a manutenção dos padrões minimos usados em estudos posteriores. A análise dos itens foi feita em duas etapas: na primeira foram calculados os indices de discriminância pelo processo tradicional e na segunda os indices de sensitivida de pelo processo desenvolvido por Gronlund (1976). Os resultados obtidos permitiram o aproveitamento de todos os itens. Os itens foram divididos em duas formas equivalentes para cada teste, cada um pode ser subdividido em três subtestes para a medida isolada das competências descritas. Para o exame de validade foram estabelecidos os indices de validade descritiva e de seleção de dominio. A fidedignidade dos testes ficou assegurada com a construção de mais de 5 itens para competência Gronlund (1976).

Dissertação (mestrado profissional) - Universidade Federal de Santa Catarina, Centro Tecnológico, Programa de Pós-Graduação em Métodos e Gestão em Avaliação, Florianópolis, 2015 / Made available in DSpace on 2016-04-19T04:17:56Z (GMT). No. of bitstreams: 1 337946.pdf: 2934284 bytes, checksum: 5a9c1b2c03a654d79a44ac797b98009e (MD5) Previous issue date: 2015 / O presente trabalho teve como objetivo comparar as avaliações educacionais em papel e em computador tendo como base as provas de Matemática do PISA 2012. Mais precisamente, analisou o efeito do modo de aplicação nos dois lados do processo: no instrumento e no avaliando, pelo estudo da dimensionalidade das provas e da comparação tanto das médias de grupos específicos, quanto do nível de dificuldade dos itens. Para as duas primeiras análises, foram utilizadas as respostas dos 1.390 alunos brasileiros que fizeram parte da amostra e que realizaram a prova de Matemática nos dois formatos. A avaliação do número de dimensões foi feita pelo método de análise fatorial de informação completa e o ajuste dos itens aos fatores revelou um conjunto predominantemente unidimensional, indicando a equivalência das provas nesse quesito. A comparação das médias considerou características individuais dos alunos e das escolas: posse de computadores, sexo, ano de ensino e localização da escola (urbana/rural; região/estado), demonstrando o impacto positivo das provas em computador no desempenho dos alunos de quase todos os grupos avaliados. A discussão do nível de dificuldade dos itens foi realizada através de uma análise quali-quantitativa, que levou em conta o posicionamento dos alunos e dos itens na escala geral de Matemática, bem como a dificuldade dos itens em papel e em computador da categoria de conteúdo Espaço e Forma classificados na mesma categoria de processo e contexto. O posicionamento dos 125 itens (84 em papel e 41 em computador) que fizeram parte do estudo indicou que, em geral, a prova em computador foi mais difícil que a prova em papel e que um número muito reduzido de itens em computador estavam adequados ao nível de proficiência da maioria dos alunos brasileiros, sugerindo uma possível superestimação das médias de proficiência nesse modo de aplicação, com impacto ainda maior nos grupos de baixo desempenho. As características distintas dos itens não permitiram obter resultados mais conclusivos quanto à comparabilidade dos dois modos de aplicação.<br> / Abstract : This study aimed to verify the comparability of educational assessments in both paper-based and computer-based formats based on the evidence of PISA 2012 Mathematics tests. More precisely, it examined the effect of the application mode on both sides of the process: in the instrument and in the examinees by the study of the dimensionality of the tests and by the comparison of the specific groups means and the level of items difficulty. For the first two analyzes, the responses of the 1.390 Brazilian students who were part of the sample and did the Mathematics tests in both formats were used. The evaluation of the number of dimensions was taken by the full information factor analysis and the adjustment of the items to the factors revealed a predominantly unidimensional set, indicating the equivalence of the tests in this matter. The comparison of means considered individual characteristics of the students and the schools: computers possession, sex, school year and school location (urban/rural, region/state), demonstrating the positive impact of the computer tests in students' performance in almost all groups evaluated. The discussion about the items difficulty level was accomplished through a qualitative and quantitative analysis, which considered the position of students and items in the Mathematics general scale as well as the difficulty of the paper and computer items of the content category Space and Shape classified under the same category of process and context. The position of the 125 items (84 in paper and 41 in computer) that were part of the study indicated that, in general, the computer-based test was more difficult than the paper-based test and that a very small number of items in computer were adequate to the proficiency level of most Brazilian students, suggesting a possible overestimation of proficiency average in this application mode, with even greater impact on the underperforming groups. The items' distinct characteristics did not allow to obtain more conclusive results regarding the comparability of the two application modes.

Dissertação (mestrado) - Universidade Federal de Santa Catarina, Centro Tecnológico. Programa de Pós-Graduação em Engenharia de Produção. / Made available in DSpace on 2012-10-20T20:56:42Z (GMT). No. of bitstreams: 1 229771.pdf: 1619219 bytes, checksum: f8398f097f18328f47d2241dd5163e63 (MD5) / A avaliação como instrumento de medida ocupa um importante espaço nas organizações atentas às exigências crescentes do mundo atual. A Teoria da Resposta ao Item (TRI) fornece modelos para a avaliação. Esta Teoria originou-se na metade da década de 30, contudo só recentemente está sendo utilizada em diversas áreas. Aqui no Brasil está sendo aplicada na área educacional. A TRI constitui um conjunto de modelos que representam a relação entre a probabilidade de dar uma certa resposta a um item e o traço (s) latente (s), habilidade (s) ou proficiência (s) do indivíduo. A presente dissertação tem como objetivo principal apresentar o GGUM - Modelo de Desdobramento Graduado Generalizado para a avaliação de medidas. Este modelo foi projetado para analisar respostas binárias e graduadas baseadas numa relação de proximidade. Apresentou-se o conceito, suposições básicas os métodos de estimação dos parâmetros dos itens e as habilidades das pessoas. Por fim apresentou-se uma aplicação do modelo GGUM com os alunos do Curso de Tecnologia do CEFET - MD - PR para avaliar o grau de satisfação destes quanto ao curso. Os resultados obtidos na análise ilustram o grande potencial desse modelo, pois, com um número pequeno de itens, os resultados foram consistentes.

Dissertação (mestrado) - Universidade Federal de Santa Catarina, Centro Tecnológico. Programa de Pós-Graduação em Engenharia de Produção. / Made available in DSpace on 2012-10-21T02:46:00Z (GMT). No. of bitstreams: 0