Submitted by JULIANA SILVA DE ANDRADE (juliana.andrade_10@hotmail.com) on 2018-10-16T17:13:44Z No. of bitstreams: 1 dissertação_v_final_ok.pdf: 1028797 bytes, checksum: 9840b3755f6b3d30624e3479858775f0 (MD5) / Approved for entry into archive by Lucilene Cordeiro da Silva Messias null (lubiblio@bauru.unesp.br) on 2018-10-17T16:11:12Z (GMT) No. of bitstreams: 1 andrade_js_me_bauru.pdf: 1028797 bytes, checksum: 9840b3755f6b3d30624e3479858775f0 (MD5) / Made available in DSpace on 2018-10-17T16:11:12Z (GMT). No. of bitstreams: 1 andrade_js_me_bauru.pdf: 1028797 bytes, checksum: 9840b3755f6b3d30624e3479858775f0 (MD5) Previous issue date: 2016-03-07 / Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES) / A implantação do Sistema de Avaliação do Rendimento Escolar do Estado de São Paulo – SARESP, desde 1996, deveria cumprir a função de produzir diagnósticos da situação da escolaridade básica paulista, visando orientar os gestores do ensino no monitoramento das políticas voltadas para a melhoria da qualidade educacional. Porém, a literatura salienta restrições nos impactos dos resultados dos sistemas de avaliação em larga escala, na atuação profissional do professor. Admite-se que a efetivação de funções diagnósticas do SARESP depende de investigações que ampliem a compreensão dos docentes da Educação Básica acerca de dimensões adotadas por esta política pública de avaliação externa, sendo tal compreensão componente essencial do repertório profissional de tais docentes. A presente pesquisa investigou fatores que poderiam influenciar nas correspondências que os professores devem estabelecer entre, de um lado, possíveis aprendizagens dos seus alunos em interação com as condições didáticas dispostas pelo próprio professor e, de outro lado, as aprendizagens preconizadas em documentos oficiais do SARESP sob a designação de habilidades ou descritores. Participaram da pesquisa uma professora do 7º e outra do 9º anos do Ensino Fundamental, responsáveis pelo componente curricular de Matemática, de uma escola da rede pública do Estado de São Paulo localizada no interior do estado. O procedimento consistiu em sete fases. Na Fase 1, ocorreu a caracterização dos planejamentos adotados pelas professoras para o ano letivo em curso quanto às Situações de Aprendizagem (SA) previstas. Na Fase 2, as participantes realizaram a descrição de uma SA já ministrada, priorizando o relato das aprendizagens previstas, as práticas e estratégias de ensino e de avaliação adotadas e as medidas de aprendizagem obtidas. Diante disso as professoras realizaram o cotejamento de tais aprendizagens com descritores previstos em documentos oficiais. Diante da transcrição dos relatos de suas ações, as professoras selecionaram uma aprendizagem e realizaram uma atividade de decomposição e de análises de lacunas assinaladas nos dados expressos na descrição da SA que foi desenvolvida. Na Fase 3 foram replicados os procedimentos da Fase 2, considerando uma SA não ministrada. Na Fase 4, o conjunto de aulas planejados na Fase 3 foram filmados e editados pela pesquisadora em episódios que priorizaram situações de interação de cada professora com os respectivos alunos. Na Fase 5, diante de cada episódio, cada professora deveria identificar: (a) se ocorreram as aprendizagens previstas; (b) quais seriam as evidências (medidas) de tais aprendizagens; e (c) quais foram os aspectos (pontos) críticos para a ocorrência das mesmas. Diante da transcrição dos relatos da professora e da descrição dos episódios, elaborada pela pesquisadora, relacionando ações do professor que antecederam respostas dos alunos, as respostas emitidas pelos alunos e ações subsequentes do professor a tais respostas, a professora estimou a correspondência entre as aprendizagens previstas nos documentos oficiais e as aprendizagens evidenciadas. Após isso as participantes indicaram outra SA ainda não ministrada para ser objeto de descrição do planejamento previstos na Fase 3. As Fases 6 e 7 consistiram na replicação das Fases 4 e 6 respectivamente para a nova SA. Considera-se que as condições metodológicas de interação adotadas nesta pesquisa possam ter favorecido o desenvolvimento de repertórios profissionais da docência definidos pela análise do alcance das práticas de ensino e de avaliação de aprendizagens adotadas cotidianamente pelas professoras participantes no trabalho. Contudo foi constatada a manutenção de expressivas diferenças entre a terminologia adotada nos documentos oficiais e a terminologia adotada nos relatos das professoras para a designação de habilidades e de medidas de aprendizagem, bem como restrições nos relatos das condições expressas no planejamento e nas descrições das ações dos alunos diante das condições de ensino oferecidas. / With the implementation of the SARESP system since 1996 carry out the function of producing a diagnosis of the state of São Paulo basic education in order to guide education managers in monitoring policies directed at improving educational quality. However, the literature reveals restrictions on the impacts of the results by the evaluation systems in large-scale,in the professional teacher action. Therefore, the present study investigated correspondences that teachers should be established between, on the one hand, possible learning of their students in interaction with the teaching conditions given by the teacher himself and, on the other hand, the proposed learning in official documents of SARESP system. The participants were two teachers of 5th and 6th grade of elementary school of a school from São Paulo. The procedure consisted of seven phases. In phase 1, the researcher contacted the planning of teachers for Learning Situations (SA) planned for the school year. In phase 2 the participants performed a description of an SA already given, prioritizing the account of planned learning the practices and teaching and assessment strategies adopted and obtained learning measures before that the teachers made the comparisons of learning with official documents. Given the transcription of reports of their actions, the teachers selected a learning and performed activities of a decompositions and gap analyzes indicated the data expressed in the description of SA that was developed. In phase 3 the procedures of Phase 2 been replicated, considering a SA not given. In the phase 4 the set of classes considered in Phase 3 were filmed and edited by the researcher that in phase 5, from the record of the classes, on episodes of teacher-student interaction, the teacher should identify: (a) There were evidenced learning by students, (b) What evidence of the measures of such learning and (c) What was the turning point for the occurrence of the learning. With the transcription of the teacher reports and description of the episodes, prepared by the researcher, relating teacher's actions leading up student responses, the answers given by students and subsequent actions teacher to such responses, the teacher estimated correspondence between planned learning in official documents and the learning evidenced by the students. After that the participants indicated another SA not given for description object of the planning set out in Phase 3. Phase 6 and 7 were characterized by the repetition of the phases 4 and 6 respectively. It is estimated that the methodological interaction conditions adopted in this research may have favored the development of professional teaching repertoires defined by analysis of the scope of teaching practices and evaluation of learning adopted by the participating teachers daily work. However the maintenance of significant differences between the terminology used in official documents and the terminology used in the reports of the teachers to describe skills and learning measures was found, as well as restrictions in the accounts of the conditions expressed in the planning and in the descriptions of the actions of students on the offered teaching conditions.

nÃo hà / Discorre sobre o emprego da avaliaÃÃo em larga escala, em especial o Sistema de AvaliaÃÃo de Desempenho Escolar de Jaguaruana â CE (SADEJ), como instrumento para melhorar a prÃtica pedagÃgica. O SADEJ procura fornecer informaÃÃes sobre o desempenho de discentes e docentes. Os resultados subsidiam aÃÃes interventivas de carÃter administrativo e pedagÃgico para superar os desafios apontados pelo ato avaliativo. Com efeito, parte do entendimento de que avaliaÃÃo, quando utilizada como instrumento norteador da gestÃo da aprendizagem, pode contribuir para a prÃtica pedagÃgica e melhorar a qualidade do ensino e, consequentemente, a prÃpria aprendizagem. Assim, o estudo teve como objetivo geral compreender a repercussÃo dos resultados originados pelo SADEJ para aprimorar a prÃtica pedagÃgica e a gestÃo da aprendizagem no ensino fundamental em escolas pÃblicas municipais de Jaguaruana- CE, no perÃodo 2011 e 2012. Especificamente tÃm-se os seguintes objetivos: descrever desde a estrutura de criaÃÃo e implantaÃÃo da experiÃncia avaliativa nas escolas atà a metodologia de coleta, tratamento, apresentaÃÃo dos dados; analisar como a Secretaria de EducaÃÃo se apropria dos resultados obtidos pela avaliaÃÃo proposta para reestruturar as aÃÃes administrativo-pedagÃgicas; explicitar, na percepÃÃo dos professores, as implicaÃÃes do Sistema na aÃÃo docente; avaliar as contribuiÃÃes do SADEJ no desempenho observado no ensino fundamental. A metodologia utilizada seguiu a abordagem quantiqualitativa de natureza bibliogrÃfica e de campo. Para coleta de dados, recorreu-se à utilizaÃÃo de entrevistas semiestruturadas e questionÃrio. Como recurso para compreensÃo dos resultados utilizou-se, respectivamente, a anÃlise de conteÃdo (RODRIGUES) para as respostas emitidas e o software SPSS (Statistical Pakage for the Social Sciences) versÃo 15.0 do aplicativo Windows para anÃlise do questionÃrio. A amostra foi composta por 129 sujeitos que lecionam nas escolas de ensino fundamental da rede municipal de ensino de Jaguaruana- CE e sete membros da equipe do SADEJ. Os resultados apontam que a avaliaÃÃo em larga escala por si, nÃo melhora o desempenho dos alunos, tampouco a aprendizagem, mas as aÃÃes posteriores a esse tipo de avaliaÃÃo que se utiliza dos resultados para fundamentar as decisÃes podem contribuir para a qualidade do ensino e otimizaÃÃo dos indicadores de desempenho e aprendizagem. Essa contribuiÃÃo à prÃtica pedagÃgica ficou evidente na proposta do SADEJ. A repercussÃo das aÃÃes executadas apÃs a divulgaÃÃo dos resultados à sensÃvel nas taxas de crescimento nos indicadores aferidos pelo IDEB e pela Prova Brasil. / Discusses the use of large-scale assessment, especially System Performance Assessment School Jaguaruana - CE (SADEJ) as a tool to improve teaching practice. The SADEJ seeks to provide information on the performance of students and teachers. The results provide interventive actions of an administrative and teaching to overcome the challenges identified by the evaluative act. Indeed, part of the understanding that assessment, when used as a guiding instrument for learning management, can contribute to pedagogical practice and improve the quality of teaching and hence learning itself. Thus, the study aimed to understand the impact of the results derived by SADEJ to improve pedagogical practice and the management of learning in basic education in public schools Jaguaruana-CE, between 2011 and 2012. Specifically have the following objectives: to describe the structure from the creation and deployment of evaluative experience in schools to the methodology of collection, treatment, presentation of data, analyze how the Department of Education appropriates the results obtained by the proposed evaluation to restructure administrative and pedagogical actions; explicit, in the perception of teachers, the implications of the system in teaching activities; SADEJ evaluate the contributions of the observed performance in elementary school. The methodology followed the approach of quantitative-bibliographical and field. For data collection, we resorted to the use of semi-structured interviews and questionnaires. As a resource to understand the results, we used, respectively, the content analysis (RODRIGUES) for responses issued and SPSS (Statistical Package for the Social Sciences) version 15.0 Windows application for analysis of the questionnaire. The sample consisted of 129 subjects who teach in elementary schools in the municipal education Jaguaruana-CE seven team members SADEJ. The results show that the large-scale assessment by itself, does not improve student performance, nor learning, but the actions subsequent to this type of evaluation which uses the results to inform decisions can contribute to the quality of teaching and optimization performance indicators and learning. This contribution to the pedagogical practice was evident in the proposed SADEJ. The impact of the actions taken after the disclosure of the results is sensitive in growth rates as measured by the indicators and the Proof IDEB Brazil.

Submitted by Renata Lopes (renatasil82@gmail.com) on 2016-05-19T12:39:10Z No. of bitstreams: 1 alexandreluizdeoliveiraserpa.pdf: 919079 bytes, checksum: 9607548bdd18c86d060e990ec10d3b78 (MD5) / Rejected by Adriana Oliveira (adriana.oliveira@ufjf.edu.br), reason: Corrigir todas as palavras-chaves, primeira palavra - inicial maiúscula on 2016-07-01T19:12:54Z (GMT) / Submitted by Renata Lopes (renatasil82@gmail.com) on 2016-07-01T19:26:21Z No. of bitstreams: 1 alexandreluizdeoliveiraserpa.pdf: 919079 bytes, checksum: 9607548bdd18c86d060e990ec10d3b78 (MD5) / Approved for entry into archive by Adriana Oliveira (adriana.oliveira@ufjf.edu.br) on 2016-07-13T16:08:21Z (GMT) No. of bitstreams: 1 alexandreluizdeoliveiraserpa.pdf: 919079 bytes, checksum: 9607548bdd18c86d060e990ec10d3b78 (MD5) / Approved for entry into archive by Adriana Oliveira (adriana.oliveira@ufjf.edu.br) on 2016-07-13T16:08:30Z (GMT) No. of bitstreams: 1 alexandreluizdeoliveiraserpa.pdf: 919079 bytes, checksum: 9607548bdd18c86d060e990ec10d3b78 (MD5) / Made available in DSpace on 2016-07-13T16:08:30Z (GMT). No. of bitstreams: 1 alexandreluizdeoliveiraserpa.pdf: 919079 bytes, checksum: 9607548bdd18c86d060e990ec10d3b78 (MD5) Previous issue date: 2012-02-01 / CAPES - Coordenação de Aperfeiçoamento de Pessoal de Nível Superior / O presente trabalho expõe os resultados da pesquisa “Autoeficácia, autoconceito e ansiedade em uma avaliação em larga escala e sua relação com o desempenho escolar”, desenvolvida no âmbito do Programa de Pós-graduação em Educação da Universidade Federal de Juiz de Fora. O objetivo dessa pesquisa foi investigar o impacto que as variáveis emocionais “autoeficácia”, “autoconceito” e “ansiedade” poderiam assumir para a explicação da proficiência dos alunos submetidos à avaliação do Programa de Avaliação da Educação Básica do Estado de Minas Gerais de 2010. Para tanto, desenvolveu-se um questionário contextual composto por assertivas que visavam medir as variáveis supracitadas. A metodologia de análise dos dados se deu em duas etapas: na análise exploratória de dados, o método escolhido foi a análise fatorial com rotação Promax; em seguida, na fase de análise confirmatória dos dados, utilizou-se o método de equações estruturais. Para a produção dos escores, optou-se pelo uso do modelo da teoria de resposta ao item de Samejima. De posse das medidas emocionais foram feitos dois estudos. O primeiro estudo analisou a relação que as variáveis emocionais assumiam com a proficiência dos alunos quando inseridas nos modelos hierárquicos lineares de explicação da proficiência alcançadas pelos estudantes classicamente usados. Os resultados encontrados neste estudo mostraram que as variáveis emocionais possuem uma significativa associação com a proficiência final dos alunos, inclusive maiores do que o de variáveis ditas clássicas, como o nível socioeconômico e a defasagem escolar, podendo assumir um importante papel na explicação dos fatores associados ao desempenho escolar e a aprendizagem do aluno. O segundo estudo investigou a relação entre os escores das variáveis de “ansiedade” e “autoeficácia” com as variáveis sociodemográficas e educacionais tradicionalmente medidas nos programas de avaliação em larga escala. Para tal, também se optou pelo uso de modelos hierárquicos lineares. Os resultados indicam que os escores das variáveis “ansiedade” e “autoeficácia” são influenciados por características de turma nas séries iniciais do ensino fundamental e, com o avanço da trajetória escolar, parecem se tornar quase que exclusivamente influenciadas por características inerentes aos indivíduos. Por fim, os achados desse trabalho demonstraram que a ciência psicológica pode assumir uma particular relevância na formulação de políticas públicas de educação, na explicação dos processos de aprendizagem subjacentes a dada política, na capacitação dos professores e no entendimento das relações entre o desempenho dos estudantes e seus atributos intraindividuais. / This work exposes the results of the research entitled “Self-efficacy, self-concept and anxiety in a large scale assessment and their relationship with the school performance”, developed in the Graduate Program in Education of the Federal University of Juiz de Fora. The aim of this research was to investigate if the emotional variables “self-efficacy”, “selfconcept” and “anxiety” can assume a critical role for the interpretation of the proficiency of the students evaluated by the assessment program of public education in Minas Gerais State in 2010. For this, I elaborated a questionnaire to measure these emotional variables. The methodology of data analysis occurred in two steps: the first one was the exploratory data analysis and I chose the method of factor loading with Promax rotation; the second step was the confirmatory data analysis, when I used structural equation models. To produce the scores, I chose the model of item response theory of Samejima. With the emotional data I carried out two studies. The first study investigated the relation of the emotional variables and the students’ proficiency when these variables are introduced in the classical linear hierarchical models of proficiency explanation. The results of this study showed that the emotional variables has a great association with the final proficiency of the students, higher than some classical variables like socioeconomic index and school delay, and they might have an important role in the explanation of the associated factors to the school performance and learning. The second study investigated the relation between “anxiety” and “self-efficacy” with socio-demographic and educational variables usually measured in large scale assessment programs. Here, my opinion was for the use of linear hierarchical models too. The results indicate that these emotional variables were influenced by class features in the initial grades of basic education. However, in the final grades of the basic education I observed a change in the results and it's possible to see that the individual features of the students have more influence on the emotional variables. In conclusion, the findings of this research showed that the psychological science is able to take over a critical role in the conceptualization of public policies of education, in the understanding of the learning processes underlying that policy, in the increasing of the support of teachers and in the comprehension of the relation between individual features and the school performance of students.

No description available.

Made available in DSpace on 2016-04-04T18:33:21Z (GMT). No. of bitstreams: 1 BRUNA COLOMBO.pdf: 1151495 bytes, checksum: 60ff0eeb7094c23e1a673bdf81b5d07e (MD5) Previous issue date: 2015-02-26 / Large-scale assessment of Basic Education, focused in exams of the students performance, has been used to monitor the quality of education through the development of indicators. This study aims to investigate the repercussions of the large-scale evaluations on the quality of Basic Education, considering Prova Brasil, a nationwide exam, and SARESP,restricted to the State of S?o Paulo, whose results compose IDEB and IDESP respectively according to the prerceptions of the school managers and teachers.It consists in a qualitative approach research conducted in two primary and secondary state schools in the city of Campinas/SP and uses as production techniques of empirical material the documental analysis of the schools political pedagogical projects; semi structured interviews; and focal group, in which the school managers and teachers were the participant subjects. The theoretical background of this research had as its main contributors Almerindo Afonso, Jos? Dias Sobrinho and Luiz Carlos de Freitas, all of which excel in the field of educational assessment. It was verified that the public policies of evaluation increased in Brazil in the 1990s decade within the background of political reforms and with the consolidation of the Evaluator State. It is in this scenario that Prova Brasil and SARESP are situated, centered in students performance, whose predominant evaluation paradigm has been the prioritization of results. The perception analysis of the surveyed subjects revealed that despite the recognition regarding the gains and difficulties linked to these evaluations, the polarization of pedagogical work prevails, which manifest itself on the students preparation for the assessments in favor of rising rates. This practice demonstrates a tendency for using large-scale evaluations with regulation and control functions through quality indicators in the light of IDEB and IDESP. The participants also highlighted challenges related to intra and extraschool conditions involving teaching and learning processes. This study points to the necessity of redefining public assessment policies, with emancipatory nature, so that it transcends the mere achievement of goals translated into indicators, putting into perspective the construction of a education with social quality for everyone. / As avalia??es em larga escala da Educa??o B?sica, centradas em exames de desempenho dos alunos, t?m sido utilizadas para monitoramento da qualidade da educa??o por meio da gera??o de indicadores. O presente trabalho busca investigar quais s?o as percep??es de professores e gestores de escolas p?blicas estaduais do munic?pio de Campinas (SP) sobre as repercuss?es da Prova Brasil e do SARESP na constru??o da qualidade da educa??o, considerando a Prova Brasil, de abrang?ncia nacional, e o SARESP, restrito ao estado de S?o Paulo, cujos resultados integram o IDEB e o IDESP, respectivamente. Trata-se de uma pesquisa de abordagem qualitativa realizada em duas escolas p?blicas estaduais de ensino fundamental e ensino m?dio do munic?pio de Campinas/SP, tendo como t?cnicas de produ??o de material emp?rico a an?lise documental dos projetos pol?ticos pedag?gicos das escolas pesquisadas; a entrevista semiestruturada; e o grupo focal, sendo as gestoras escolares e os professores os sujeitos participantes. O aporte te?rico que balizou esta pesquisa teve como principais contribuintes, que se destacam no campo da avalia??o educacional, Almerindo Afonso, Jos? Dias Sobrinho e Luiz Carlos de Freitas. Constatou-se que as pol?ticas p?blicas de avalia??o, no Brasil, intensificaram-se na d?cada de 1990, no contexto das reformas pol?ticas, com a consolida??o do Estado Avaliador. ? nesse cen?rio que se inscrevem a Prova Brasil e o SARESP, centradas no desempenho dos alunos, cujo paradigma avaliativo predominante tem sido o que prioriza os resultados. A an?lise da percep??o dos sujeitos pesquisados revelou que, apesar do reconhecimento sobre os ganhos e dificuldades atrelados a essas avalia??es, prevalece a polariza??o do trabalho pedag?gico que se expressa pela prepara??o dos alunos para as avalia??es, em prol da eleva??o dos ?ndices. Tal pr?tica evidencia a tend?ncia de utiliza??o das avalia??es em larga escala com fun??o de regula??o e controle, por meio de indicadores de qualidade, como o do IDEB e do IDESP. Os participantes acentuaram, ainda, desafios que se referem a condicionantes intra e extraescolares que implicam os processos de ensino e aprendizagem. A pesquisa aponta para a necessidade de se redefinir pol?ticas p?blicas de avalia??o, com cunho emancipat?rio, que transcenda o mero alcance de metas traduzidas por meio de indicadores, perspectivando a constru??o de uma educa??o de qualidade social para todos.

Made available in DSpace on 2016-04-27T16:57:35Z (GMT). No. of bitstreams: 1 Andre Ricardo Cola.pdf: 838534 bytes, checksum: 8b14e9e3b0edb6aae2caf2406846bf8f (MD5) Previous issue date: 2015-03-16 / Coordenação de Aperfeiçoamento de Pessoal de Nível Superior / The main idea of this research was to investigate teachers comprehension who teach mathematics in basic education about external and large-scale assessments. The theoretical assumptions that supported the reflections and analyses were based on the learning evaluation, assessment in mathematics education and external and large-scale assessments. The main papers used as a reference in each of the areas are respectively: Almeida and Franco (2011), Arredondo and Diago (2009), Fernandes (2009), Buriasco and Soares (2012), Cury (2009), Sameshima (2008) , Moraes and Moura (2009), Amaro (2013), Bonamino and Sousa (2012), Dantas (2009), Horta Neto (2010a, b), Rosistolato and Viana (2014). The methodology adopted for the development of the research was the qualitative approach, with data collection procedure performed through semi-structured interviews. The results showed that the interviewers understanding about the evaluation processes that permeate the school environment is very superficial and misunderstandings identified in various concepts that circumscribe the external and large-scale assessments can result in damage to the pedagogical action. In mathematics education, the survey revealed that the external and large-scale assessments incorporate elements of a traditional evaluation practice, which does not favor the error perspective as an opportunity to improve knowledge that was not well acquired / A ideia central dessa pesquisa foi investigar o entendimento de professores, que ensinam matemática na educação básica, acerca das avaliações externas e em larga escala. Os pressupostos teóricos que embasaram as reflexões e análises pautaram-se na avaliação da aprendizagem, avaliação em educação matemática e avaliações externas e em larga escala. Os principais trabalhos utilizados como referência em cada uma das áreas são, respectivamente: Almeida e Franco (2011), Arredondo e Diago (2009), Fernandes (2009), Buriasco e Soares (2012), Cury (2009), Sameshima (2008), Moraes e Moura (2009), Amaro (2013), Bonamino e Sousa (2012), Dantas (2009), Horta Neto (2010a,b), Rosistolato e Viana (2014). A metodologia adotada para o desenvolvimento da investigação foi a pesquisa de abordagem qualitativa, com procedimento de coleta dos dados realizado por meio de entrevistas semiestruturadas. Os resultados obtidos mostraram que o entendimento, por parte dos entrevistados, acerca dos processos avaliativos que permeiam o ambiente escolar é bastante superficial e os equívocos identificados em diversos conceitos que circunscrevem as avaliações externas e de larga escala pode acarretar em prejuízos à ação pedagógica. No âmbito da educação matemática, a pesquisa revelou que as avaliações externas e em larga escala acabam incorporando elementos de uma prática avaliativa tradicional, que não privilegia a perspectiva do erro como oportunidade para superação de saberes não dominados

Submitted by Renata Lopes (renatasil82@gmail.com) on 2016-02-19T13:21:28Z No. of bitstreams: 1 danielaraujovignoli.pdf: 3447448 bytes, checksum: 832b71d634bfb3b5f8c8cd5182d363e6 (MD5) / Approved for entry into archive by Adriana Oliveira (adriana.oliveira@ufjf.edu.br) on 2016-02-26T13:47:21Z (GMT) No. of bitstreams: 1 danielaraujovignoli.pdf: 3447448 bytes, checksum: 832b71d634bfb3b5f8c8cd5182d363e6 (MD5) / Made available in DSpace on 2016-02-26T13:47:21Z (GMT). No. of bitstreams: 1 danielaraujovignoli.pdf: 3447448 bytes, checksum: 832b71d634bfb3b5f8c8cd5182d363e6 (MD5) Previous issue date: 2014-03-18 / CAPES - Coordenação de Aperfeiçoamento de Pessoal de Nível Superior / Este trabalho é constituído por dois estudos com objetivos distintos acerca do impacto da Ansiedade Face ao Teste e das Autocrenças Acadêmicas no desempenho em avaliações em larga escala. As análises realizadas utilizaram o banco de dados do Programa de Avaliação da Rede Pública de Educação Básica (PROEB) edição de 2011, que avaliou as disciplinas língua portuguesa e matemática no 5º e 9º anos do Ensino Fundamental e 3º ano do Ensino Médio das redes municipais e estaduais de Minas Gerais. O banco de dados contou com 661.011 alunos e 9.920 escolas. Os dois estudos consistiram no aprimoramento de um estudo conduzido no PROEB 2010. No primeiro estudo, foram realizadas várias alterações nas escalas de Ansiedade Face ao Teste (AFT), Autoeficácia Acadêmica (AFA), Autoconceito Acadêmico (ACA) e Percepção de Controle de Resultados (PC). Em seguida, analisou-se o impacto das alterações na qualidade das escalas. Também foi testada a adequação de uma nova configuração de modelo estrutural composto pelas variáveis AFT, AFA, ACA e MTA e por um fator de segunda ordem denominado Autocrenças Acadêmicas. O segundo estudo avaliou o impacto dessas variáveis no desempenho dos alunos através de um modelo linear hierárquico, considerando três níveis: aluno, turma e escola. Os coeficientes de impacto das variáveis do modelo foram comparados com os obtidos na pesquisa realizada no PROEB 2010. Para avaliar as escalas, no primeiro estudo, foram conduzidas análises fatoriais em duas etapas, exploratória e confirmatória. Em seguida, foram realizadas comparações entre o alfa de Cronbach das escalas atual e anterior. O método de rotação utilizado foi Promax. A modelagem de equações estruturais permitiu que a estrutura de fatores encontrada fosse testada e comparada com a estrutura proposta no estudo realizado no PROEB 2010. No segundo estudo, o fator AFT e o fator de segunda ordem, Autocrenças Acadêmicas, tiveram seus escores gerados através da Teoria de Resposta ao Item, modelo de Samegima, e inseridos no modelo linear hierárquico, juntamente com as outras variáveis em análise. Os coeficientes dos modelos lineares hierárquicos de 2010 foram comparados aos coeficientes do presente estudo. Nos resultados do primeiro estudo, a análise fatorial indicou o surgimento de um novo fator, Motivação Acadêmica e a extinção do fator PC. O Alfa de Cronbach das escalas foi superior ao das escalas anteriores, exceto o fator AFA. Os Alfas foram: AFT: 0,842; AFA: 0,793; ACA: 0,911 e MTA: 0,754. Foram produzidos dois modelos estruturais. Um deles utilizou a estrutura de dados proposta do estudo de 2010, porém, com as medidas das novas escalas (esse modelo foi denominado de 2º modelo). O outro modelo utilizou a nova estrutura de dados encontrada na análise fatorial confirmatória e as medidas das escalas produzidas para esse estudo (3º modelo). Tais modelos foram comparados e o 3º modelo demonstrou bons índices de ajuste, superiores aos demais modelos: CFI=0,96; NFI=0,96; RMSEA=0,12 e RMR=0,05. No segundo estudo, a comparação dos coeficientes dos modelos lineares hierárquicos considerou apenas o nível do aluno e se concentrou nas variáveis emocionais. As variáveis AFT e Autocrenças Acadêmicas do presente estudo obtiveram coeficientes superiores às variáveis emocionais do modelo de 2010, principalmente o fator Autocrenças Acadêmicas. Acredita-se que a diferença se deve ao aprimoramento das escalas, que as tornou mais específicas. As variáveis emocionais apresentaram os maiores coeficientes de impacto no desempenho no modelo linear, superiores ao índice socioeconômico e a defasagem escolar, que são tradicionalmente variáveis de grande impacto no desempenho. As consequências do impacto das variáveis emocionais no desempenho são discutidas do ponto de vista psicométrico e educacional. / This work consists of two distinct studies with different objectives about the impact of the Test Anxiety and Academic self-beliefs on performance in large-scale assessments. The analyzes used the database of the Programa de Avaliação da Rede Pública de Educação Básica (PROEB) 2011 edition, which evaluated subjects Portuguese and mathematics at the 5th and 9th years of Elementary Schooll and the last year of High School of municipal and state schools of Minas Gerais.The database included 661,011 students and 9,920 schools. Both studies consisted in the improvement of a study conducted in PROEB 2010.In the first study, several changes in the Test Anxiety Scale (AFT), Academic Self-Efficacy Scale (AFA), Academic Self-Concept Scale (ACA) and Perceived Control Results Scale (PC) were performed.Then we analyzed the impact of changes in the quality of the scales. Also tested the suitability of a new structural model configuration consisted by the variables AFT, APA, ACA and MTA and a second-order factor named Academic self-beliefs.The second study assessed the impact of these variables on student performance through a hierarchical linear model, considering three levels: student, class and school. The impact coefficients of the variables of the model were compared with those obtained in research conducted in PROEB 2010.In the first study, to evaluate of the scales, a factor analyzes were conducted in two stages, exploratory and confirmatory. Then, comparisons between Cronbach's alpha of the current scale and the previous one were performed.The method used was Promax rotation. The structural equation modeling allowed that the structure of factors found were tested and compared with the structure of factors found in the study conducted in PROEB in 2010.In the second study, the AFT factor and second-order factor, Academic self-beliefs, had their scores generated by the Item Response Theory, model Samegima, and entered into the hierarchical linear model, along with the other variables in the analysis.The coefficients of hierarchical linear models of 2010 were compared to the coefficients of the present study. The results of the first study, shown the emergence of a new factor, Academic Motivation and the demise of the PC factor.The Cronbach's alpha of the scales was higher than the previous scales, except the AFA factor. Alphas were: AFT: 0.842; AFA: 0.793; ACA: MTA and 0.911: 0.754. Two structural models were produced. One of them used the data structure proposed in the 2010 study, however, the measures of the new scales (this model was called the 2nd model).The other model used the new data structure found in the confirmatory factor analysis and measures of the scales produced for this study (model 3). These models were compared and the 3rd model demonstrated good fit, superior to other models: CFI = 0.96; NFI = 0.96; RMSEA = 0.12 and RMR = 0.05.In the second study, the analisys was made by the comparison of coefficients of hierarchical linear models, considering only the level of the student and was focused only on emotional variables. The coeficients of the variables, AFT and Academic self-beliefs of this study were higher than coefficients to emotional variables in the 2010 model, especially the academic selfbeliefs factor.It is believed that the difference is due to the improvement of scales, which become more specific. The emotional variables had the greatest impact on performance coefficients in the linear model, higher then socioeconomic index and school delay, variables that are traditionally knowed as a varialble of large impact on performance . The consequences of the impact of emotional variables on performance are discussed from the point of psychometric and educational standpoint.

Submitted by Renata Lopes (renatasil82@gmail.com) on 2016-09-20T13:47:56Z No. of bitstreams: 1 wellingtonsilva.pdf: 6130109 bytes, checksum: 639bf4b28ab59af38731c1e34562bfcc (MD5) / Approved for entry into archive by Adriana Oliveira (adriana.oliveira@ufjf.edu.br) on 2016-10-04T15:48:34Z (GMT) No. of bitstreams: 1 wellingtonsilva.pdf: 6130109 bytes, checksum: 639bf4b28ab59af38731c1e34562bfcc (MD5) / Approved for entry into archive by Adriana Oliveira (adriana.oliveira@ufjf.edu.br) on 2016-10-04T15:48:47Z (GMT) No. of bitstreams: 1 wellingtonsilva.pdf: 6130109 bytes, checksum: 639bf4b28ab59af38731c1e34562bfcc (MD5) / Made available in DSpace on 2016-10-04T15:48:47Z (GMT). No. of bitstreams: 1 wellingtonsilva.pdf: 6130109 bytes, checksum: 639bf4b28ab59af38731c1e34562bfcc (MD5) Previous issue date: 2010-09-14 / Em 1997, através do Sistema Nacional de Avaliação da Educação Básica – SAEB, definiu-se a escala de proficiência para o Brasil. A partir de então, praticamente todas as avaliações em larga escala realizadas por diversos estados brasileiros têm procurado manter uma comparabilidade de resultados com essa escala, por meio da Metodologia da Teoria da Resposta ao Item – TRI. Entretanto observa-se uma diversidade de situações ao se analisar as diferentes avaliações realizadas pelos Estados brasileiro e até mesmo no próprio SAEB. Nesse trabalho, apresentaremos alguns aspectos técnicos necessários para se garantir a comparabilidade nos procedimentos de linkagem de avaliações, bem como as características das avaliações do SAEB e de alguns estados brasileiros ao longo do tempo. / In 1997, through the National System of Basic Education Evaluation ( SAEB ), the proficiency scale for Brazil was defined. From that time on, almost all the assessment realized by several Brazilian states have tried to keep a result comparability with this scale through Item Response Theory Methodology ( IRT ). However, a variety of situations is observed when different assessments realized in Brazilian states or even at SAEB are analyzed.In this article, some technical aspects needed for ensuring the comparability in the assessment linking procedures are presented, as well as the characteristic of SAEB´s assessment and some Brazilian states´ assessment throughout time.

L’objectif de la présente étude est de soutenir l’utilisation d’une approche écologique pour l’analyse des données d’une évaluation standardisée. Nous implémentons cette approche en utilisant une Analyse de Classes Latentes (ACL) avec covariables sur les données du test de lecture du Programme d’Analyse des Systèmes Éducatifs de la CONFEMEN (PASEC) des élèves francophones de 6e année du primaire au Cameroun (N=617) et montrons comment une telle approche peut susciter un regard nouveau sur les résultats de cette évaluation. En effet, les programmes d’Évaluations standardisées à Larges Échelles (ELE) visent à évaluer les apprentissages et les compétences des individus et fournissent des données d’aide à la décision dans beaucoup de pays (Hogan, 2017 ; Loye, 2011 ; Wagemaker, 2014). Dans le cadre de ces ELE, les performances sont estimées uniquement sur la base des réponses que fournissent les candidats et donc de leurs capacités cognitives (Zumbo et al, 2015). Pourtant, de plus en plus de recherches suggèrent de considérer la performance à un test comme un phénomène qui se réalise dans un réseau interconnecté de connaissances, de caractéristiques individuelles et de contextes particuliers (McNamara, 2007 ; McNamara et Roever, 2006 ; Mislevy, 2018 ; Zumbo et al, 2015). L’approche écologique, qui s’inscrit dans cette perspective, s’intéresse aux hypothèses contextuelles, sociales et culturelles lors de l’estimation des performances à un test (McNamara, 2007 ; McNamara et Roever, 2006 ; Zumbo et al, 2015). Nos résultats mettent en évidence des écologies de performances en lecture qui varient en fonction des régions. Dans chacune de ces écologies, les profils de performances en lecture qui s’y dégagent dépendent des caractéristiques des élèves et des caractéristiques des milieux scolaires et extrascolaires dans lesquels ils évoluent. Nous mettons ainsi l’emphase sur le caractère situé des performances à un test permettant une lecture plus équitable des performances des différents candidats. Ce faisant, nous formulons des recommandations qui tiennent compte des réalités contextuelles des candidats contrairement aux recommandations uniformes souvent formulées à la suite des résultats aux ELE. / The purpose of this study is to support the use of an ecological approach for the analysis of standardized data assessment. This study is implimented by Latent Classes Analysis (ACL) with covariables on the test reading data of the « Programme d’Analyse des Systèmes Éducatifs de la CONFEMEN » (PASEC) french-speaking students of 6th grade primary school in Cameroon (N = 617) and shows how this approach can change the way we interpret the results of this study. Indeed, Standardized Large Scale Assessments (ELE) programs aim to appraise the learning and skills of individuals and provide decision support data in many countries (Hogan, 2017 ; Loye, 2011; Wagemaker, 2014). In the context of these ELEs, performance is estimated solely based on the responses provided by the candidates and therefore of their cognitive abilities (Zumbo et al, 2015). Yet a growing body of research suggests viewing test performance as a phenomenon that occurs in an interconnected network of knowledge, individual characteristics, and particular contexts (McNamara, 2007 ; McNamara and Roever, 2006 ; Mislevy, 2018 ; Zumbo et al. , 2015). The ecological approach, which is part of this perspective, is interested in the contextual, social and cultural hypotheses when estimating the performance of a test (McNamara and Roever, 2006 ; McNamara, 2007 ; Zumbo et al, 2015). Our results highlight reading performance ecologies that vary by region. In each of these ecologies, the reading performance profiles that emerge depend on the characteristics of the students and the characteristics of the school and out-of-school environments in which they operate. We therefore put the emphasis on the situated character of the performances on a test allowing a fairer reading of the performances of the different candidates. In doing so, we formulate recommendations that take into account the contextual realities of applicants, unlike the standard recommendations often made following ELE results.

Traditional tests for large-scale assessment of mathematics learning have been criticized for several reasons, such as their mismatch between the vision of mathematical competence and the content covered by the test, and their failure to provide relevant information for guiding further learning and instruction. To achieve that large-scale assessments can function as tools for monitoring and improving learning and teaching, one has to move away from the rationale, the constraints, and the practices of traditional tests. As an illustration this paper presents an alternative approach to largescale assessment of elementary school mathematics developed in Flanders, Belgium Using models of item response theory, 14 measurement scales were constructed, each representing a cluster of curriculum standards and covering as a whole the mathematics curriculum relating to numbers, measurement and geometry. A representative sample of 5,763 sixth-graders (12-year-olds) belonging to 184 schools participated in the study. Based on expert judgments a cut-off score was set that determines the minimum level that students must achieve on each scale to master the standards. Overall, the more innovative curriculum standards were mastered less well than the more traditional ones. Few gender differences in performance were observed. The advantages of this approach and its further development are discussed.