No description available.

[pt] As avaliações de proficiência em larga escala vêm exercendo um papel relevante no contexto educacional contemporâneo, pois servem, entre outros propósitos, para retratar mais precisamente o nível de desempenho escolar de uma grande quantidade de alunos avaliados, como também para fornecer subsídios mais sólidos ao aperfeiçoamento das políticas educacionais que vêm sendo implementadas. As escalas de proficiência utilizadas nessas avaliações revestem-se de uma grande importância nesse processo, visto que são utilizadas pelos avaliadores e pelos gestores educacionais como um instrumento capaz de aferir e interpretar a proficiência dos alunos nas diversas habilidades que compõem os domínios de conhecimento investigados. O objeto de estudo da presente tese são precisamente as escalas de proficiência utilizadas nos sistemas de avaliação em larga escala, que são tratadas em três diferentes abordagens: primeiro, há uma avaliação das diferentes abordagens para se obter uma associação entre os itens de um teste e os níveis ou pontos significativos de proficiência de diversas escalas atualmente empregadas. Depois, utilizando uma escala de proficiência em Matemática para a quarta série do Ensino Fundamental, é desenvolvida uma abordagem alternativa para caracterizar os níveis representativos de uma escala de proficiência escolar. Para isso foram utilizados métodos baseados em análise de conglomerados (cluster analysis) para a escolha do subconjunto de itens que caracteriza cada nível de proficiência. Por fim, é realizada uma interpretação pedagógica dos clusters formados, com base nos conhecimentos do ensino e da aprendizagem das habilidades básicas da educação matemática para a primeira etapa do ensino fundamental. A abordagem utilizada será a análise da natureza das operações mentais que caracterizam cada uma das competências e habilidades que compõem os clusters, tendo como pressupostos básicos as referências ao processo de aprendizagem da matemática. / [en] Large-scale evaluations have played a relevant role in the contemporary field of education, not only because of their importance in providing a more precise assessment of the proficiency of large numbers of students, but also because of their use as a means of producing more reliable elements that are used in the improvement of educational policies. The proficiency scales adopted in these evaluation programs are a very important part of this process, for they are employed by educational evaluators and decision-makers as an instrument able to gauge and interpret the students` levels of proficiency in the many different abilities that compose the knowledge domains under investigation. The object of this thesis is precisely the proficiency scales used in large scale evaluation systems, which are treated according to three different approaches: First an investigation is made about the relative merit of different methods of association between the items that make up a test and the significant points or levels of proficiency in several scales that have been employed by different evaluation programs. Then, by using a 4th-grade Mathematics proficiency scale, an alternative approach to characterize levels that are representative of a proficiency scale is developed. This is done by the use of a cluster analysis method aimed at choosing a subset of items that characterize each proficiency level. Finally, a pedagogical interpretation of the clusters formed along the proficiency scale is obtained through the consideration of teaching and learning of Mathematics education basic skills, related to the beginning series of the fundamental level. The methodology used in this process is the analysis of the nature of mental operations that characterize each one of the competencies and skills that are typical of each cluster, by adopting references to Mathematics learning processes as basic assumptions.

[pt] Freqüentemente, somos informados sobre diversos episódios violentos que ocorrem dentro e nas proximidades das escolas. Como essa violência se relaciona com o desempenho dos alunos? Neste artigo, investigamos esta questão e mostramos que os alunos que freqüentaram escolas mais violentas têm, em média, pior proficiência nas provas do SAEB 2003, mesmo controlando por atributos dos próprios estudantes e dos respectivos professores, turmas e colégios. Mais ainda, encontramos evidências de que a violência afeta mais os alunos da cauda inferior da distribuição de proficiência. Adicionalmente, descobrimos que além da relação direta entre violência na escola e proficiência, parece haver uma associação indireta entre essas variáveis que opera por meio da rotatividade dos professores. De fato, mostramos que a ocorrência de fatos violentos numa escola está negativamente relacionada à probabilidade de as turmas desse colégio terem um único professor durante o ano letivo, e positivamente associada à probabilidade de essas turmas sofrerem com o problema da rotatividade docente. / [en] Frequently, the media inform us about violent episodes that happen inside and around schools. How is that violence related to students performance? In this paper, I show that, on average, students who attended more violent schools had less proficiency on the SAEB 2003, a test carried out by the Brazilian Ministry of Education, even when I controlled for school, class, teacher and student characteristics. This relation is stronger in the bottom of the proficiency distribution. Furthermore, I find out that school violence increases the probability of teacher turnover among schools, indicating that violence also has an indirect effect on the students proficiency.

[pt] O objetivo desta tese é analisar um dos aspectos da escolaridade das crianças brasileiras: a defasagem idade- série. No primeiro capítulo, analisamos a influência dos fatores familiares. Usamos os dados da Pesquisa Nacional por Amostra de Domicílios 1996 (PNAD/IBGE) e seu suplemento de mobilidade social, com indicadores sobre os avós. Identificamos o efeito da renda e do nível educacional dos pais sobre a defasagem das crianças usando três instrumentos: a oferta educacional dos pais, fatores familiares permanentes e a mudança no sistema educacional de 1971. Mostra-se que a renda familiar per capita e o nível educacional, dos pais têm efeito negativo na probabilidade da criança ter defasagem. Numa estimação probit ou de mínimos quadrados ordinários, o viés da escolaridade dos pais é para cima enquanto o da renda familiar é para baixo. No segundo capítulo, estudamos o efeito do status nutricional das crianças sobre a probabilidade de entrarem com atraso na escola usando a Pesquisa de Padrões de Vida (PPV/IBGE). Mostra- se que controlando pela renda e considerando a endogeneidade do status nutricional, crianças com uma melhor medida de altura/peso padronizada têm maior probabilidade de ingressarem aos 7 anos na escola. O terceiro capítulo aborda relações entre a proficiência do aluno da 4ª série e a dispersão de idade nas turmas. Usamos a base de dados do Sistema de Avaliação da Educação Básica 2003 (SAEB/INEP-MEC) e uma técnica que controla fatores não observados da escola. Mostra-se que turmas mais heterogêneas na idade têm proficiência mais baixa e ter professor com nível de pós-graduação reduz o impacto negativo da dispersão sobre a proficiência. / [en] The objective of this thesis is to analyze one of the main aspects of children education in Brazil: age-degree delay. Chapter on shows that family factors have an influence in children education using the 1996´s national survey Pesquisa Nacional por Amostra de Domicílios (PNAD/IBGE) and its mobility supplement, which has some grandfathers and grandmother´s indicators. An income effect and a parent´s education effect in children schooling delay are identified using three instruments: parent´s school supply, permanent family factors and the 1971 educational reform. Per capita family income and parent´s education have a negative effect in the child´s probability of being behind at school. Probit and ordinary least squares (without considering endogeneity) results present evidence that there is an upward bias in the parent´s education coefficient and a downward bias in the family income coefficient. Chapter two analyzes the impact of child´s nutritional status in school entrance delay using the survey Pesquisa de Padrões de Vida (PPV/IBGE). We show that, controlling for family income and considering the endogeneity of nutritional status, children who have a better indicator of height for age, have a larger probability of going to school whit exactly 7 years of age. Chapter three studies the relationship between student´s proficiency in the 4th grade of primary education and student´s age dispersion in the class, using the survey Sistema de Avaliação de Educação Básica 2003 (SAEB/INEP-MEC) and a method to control for unobserved factors in school. We show that students in more heterogeneous classes in terms of student´s age have less proficiency. We also show that having a teacher with a pos- graduation level reduces the negative impact of age dispersion on student´s proficiency.

Resumo: Este trabalho analisa, com base nos critérios adotados pelo Certificado de Proficiência em Língua Portuguesa para Estrangeiros (Celpe-Bras), amostras das atividades de produção escrita propostas durante o segundo semestre de 2005 nas turmas de hispanofalantes do curso de Português para Estrangeiros do Centro de Línguas e Interculturalidade da Universidade Federal do Paraná (Celin), em Curitiba. O conceito de proficiência que fundamenta o exame consiste no uso adequado da língua para desempenhar ações no mundo. Nesse sentido, as tarefas escritas do Celpe-Bras levam em conta o contexto, o propósito e o(s) interlocutor(es), privilegiando a adequação a diferentes gêneros discursivos. Os resultados da análise podem servir de diagnóstico do ensino da produção escrita na área, uma vez que não estão presentes no corpus – exceto por algumas tentativas isoladas – os elementos relevantes para a identificação dos gêneros discursivos. Por sua vez, os princípios da visão de linguagem subjacente ao Celpe-Bras podem ser utilizados como subsídio para os professores de Português para Estrangeiros repensarem a sua prática e elaborarem materiais didáticos que atendam às especificidades dos falantes de espanhol, um público que, segundo pesquisas lingüísticas e pedagógicas, possui características diferenciadas em relação aos outros aprendizes de língua portuguesa. Um aspecto positivo da proximidade entre o português e o espanhol é a possibilidade de trabalhar em sala de aula questões que seriam complexas – como o desenvolvimento da competência discursiva e textual – em contextos de ensino de línguas mais distantes. A issertação examina as orientações do Celpe-Bras e levanta questões referentes ao ensino da escrita em Português para Estrangeiros à luz das investigações desenvolvidas em lingüística aplicada numa perspectiva sócio-histórica, enfatizando a noção de gêneros discursivos tal qual foi desenvolvida por Bakhtin e mais tarde apropriada pelos autores do chamado interacionismo sociodiscursivo, como Schneuwly e olz, que têm se ocupado da transposição didática das teorias sobre gêneros. Schneuwly e Dolz propõem os gêneros como grandes instrumentos para a aprendizagem do texto escrito, mas observam que o gênero trabalhado na escola é sempre uma variação do gênero de origem: ele é, principalmente, gênero a aprender, embora permaneça gênero para comunicar.

Orientador: Douglas Altamiro Consolo / Banca: Ana Mariza Benedetti / Banca: Paula Tavares Pinto / Banca: Teresa Helena Buscato Martins / Banca: Vera Lúcia Teixeira da Silva / Resumo: O presente trabalho trata da avaliação de proficiência linguística de professores de língua estrangeira (LE) realizada por meio de testes de proficiência. Objetivamos descrever e aprimorar o teste escrito do EPPLE (Exame de Proficiência para Professores de Língua Estrangeira), por meio da verificação de aspectos que englobam a validade interna do instrumento, incluindo, por exemplo, a validade de construto e a validade de conteúdo. De acordo com Fulcher e Davidson (2007), a validade de construto é a base de evidências para a interpretação ou uso de um teste, enquanto que a validade de conteúdo representa o conjunto maior de tarefas das quais o teste deve ser uma amostra. Sendo assim, apresentamos um levantamento detalhado sobre a teoria em avaliação de proficiência linguística que abrange o construto do EPPLE, com base em suas tarefas e objetivos. Além de considerações a respeito do exame como um todo, apresentamos como foco a análise das tarefas do teste escrito para a verificação da validade de conteúdo. Buscamos, por meio de uma discussão crítico-descritiva, averiguar aspectos como o método do teste, as tarefas, a confiabilidade, a praticidade e a validade que permeiam a implementação e o aprimoramento de um instrumento de avaliação. Por meio de uma discussão teórica associada à análise das tarefas do teste escrito, dos dados de uma aplicação realizada no ano de 2012 e de um questionário de pesquisa, apresentamos críticas e sugestões que possam contribuir para a validação do teste escrito do EPPLE. No âmbito das críticas, destaca-se, por exemplo, a utilização de um grande número de questões dissertativas, mais apropriadas para avaliação de produção escrita, na seção em que o foco de avaliação é a compreensão textual. Quanto às sugestões, salientamos a importância de uma maior caracterização do EPPLE como um exame para fins específicos, no que tange aspectos de proficiência... / Abstract: This thesis presents an investigation about the proficiency assessment of foreign language teachers that happens by means of proficiency tests. Our goal is to describe and improve the written test of EPPLE (Proficiency Examination for Foreign Language Teachers), by verifying aspects that involve its internal validity, including, for instance, the construct validity and the content validity. According to Fulcher and Davidson (2007), the construct validity is the basis of evidence for the interpretation or the use of a test. The content validity, on the other hand, represents the group of tasks of which a given test should be a sample. To fulfill our goal, we present a detailed survey about the proficiency assessment theory that underpins the construct for the EPPLE examination, based on its tasks and goals. In addition to the considerations about the exam as a whole, we also present, as a focus, the tasks of the written test in order to contribute with investigations about its content validity. We look into aspects such as the test method, the tasks, the reliability and the validity that are involved in the implementation and improvement of an assessment instrument. Thus, by means of a theoretical discussion associated with the task analyses of the written test, the data collected in the application of EPPLE in 2012 and data from a research questionnaire, we present criticisms and suggestions that may contribute with the improvement of EPPLE. We indicate that there are many open questions, more indicated to test written production, in the section in which the assessment goal is reading skills. As for suggestions, for instance, we recommend that the EPPLE should better reflect its purpose of an exam for specific purposes, that is, the assessment of language that is representative of FL teachers' linguistic domain / Doutor

Made available in DSpace on 2016-05-17T16:51:19Z (GMT). No. of bitstreams: 0 Previous issue date: 2015-08-10. Added 1 bitstream(s) on 2016-05-17T16:54:55Z : No. of bitstreams: 1 000863597.pdf: 2799253 bytes, checksum: 3a2314fb109668bbf7247c5af531e99f (MD5) / Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES) / O presente trabalho trata da avaliação de proficiência linguística de professores de língua estrangeira (LE) realizada por meio de testes de proficiência. Objetivamos descrever e aprimorar o teste escrito do EPPLE (Exame de Proficiência para Professores de Língua Estrangeira), por meio da verificação de aspectos que englobam a validade interna do instrumento, incluindo, por exemplo, a validade de construto e a validade de conteúdo. De acordo com Fulcher e Davidson (2007), a validade de construto é a base de evidências para a interpretação ou uso de um teste, enquanto que a validade de conteúdo representa o conjunto maior de tarefas das quais o teste deve ser uma amostra. Sendo assim, apresentamos um levantamento detalhado sobre a teoria em avaliação de proficiência linguística que abrange o construto do EPPLE, com base em suas tarefas e objetivos. Além de considerações a respeito do exame como um todo, apresentamos como foco a análise das tarefas do teste escrito para a verificação da validade de conteúdo. Buscamos, por meio de uma discussão crítico-descritiva, averiguar aspectos como o método do teste, as tarefas, a confiabilidade, a praticidade e a validade que permeiam a implementação e o aprimoramento de um instrumento de avaliação. Por meio de uma discussão teórica associada à análise das tarefas do teste escrito, dos dados de uma aplicação realizada no ano de 2012 e de um questionário de pesquisa, apresentamos críticas e sugestões que possam contribuir para a validação do teste escrito do EPPLE. No âmbito das críticas, destaca-se, por exemplo, a utilização de um grande número de questões dissertativas, mais apropriadas para avaliação de produção escrita, na seção em que o foco de avaliação é a compreensão textual. Quanto às sugestões, salientamos a importância de uma maior caracterização do EPPLE como um exame para fins específicos, no que tange aspectos de proficiência... / This thesis presents an investigation about the proficiency assessment of foreign language teachers that happens by means of proficiency tests. Our goal is to describe and improve the written test of EPPLE (Proficiency Examination for Foreign Language Teachers), by verifying aspects that involve its internal validity, including, for instance, the construct validity and the content validity. According to Fulcher and Davidson (2007), the construct validity is the basis of evidence for the interpretation or the use of a test. The content validity, on the other hand, represents the group of tasks of which a given test should be a sample. To fulfill our goal, we present a detailed survey about the proficiency assessment theory that underpins the construct for the EPPLE examination, based on its tasks and goals. In addition to the considerations about the exam as a whole, we also present, as a focus, the tasks of the written test in order to contribute with investigations about its content validity. We look into aspects such as the test method, the tasks, the reliability and the validity that are involved in the implementation and improvement of an assessment instrument. Thus, by means of a theoretical discussion associated with the task analyses of the written test, the data collected in the application of EPPLE in 2012 and data from a research questionnaire, we present criticisms and suggestions that may contribute with the improvement of EPPLE. We indicate that there are many open questions, more indicated to test written production, in the section in which the assessment goal is reading skills. As for suggestions, for instance, we recommend that the EPPLE should better reflect its purpose of an exam for specific purposes, that is, the assessment of language that is representative of FL teachers' linguistic domain

[pt] O objetivo dessa dissertação é propor protocolos estatísticos alternativos ao atual praticado pela American Society for Testing and Materials (ASTM) para a determinação do desempenho dos laboratórios participantes de Ensaios de Proficiência (EP) utilizando estatística robusta. A participação em EP é um requisito compulsório à conformidade nas certificações e acreditações para laboratórios de ensaio e calibração. O Programa de EP da ASTM considera o valor de consenso para prover os escores dos participantes. O modelo para estimar os escores, ZASTM, se baseia na média amostral (valor designado, VD) e no desvio padrão amostral (desvio padrão para a proficiência, DPP). Neste cenário, há necessidade de tratamento exaustivo dos dados, motivação para este estudo, incluindo o tratamento de outliers e a investigação de existência de distribuição normal (Gaussiana). Neste estudo, os protocolos propostos (nIQR e MADe) consideram o emprego de estatísticas robustas, mais resistentes à presença de outliers, os quais ocasionam desvios da normalidade desejada. Os resultados da comparação do protocolo ASTM com os protocolos propostos, em dados da matriz de óleos lubrificantes, reportados ao provedor ASTM, revelam haver diferença entre as médias ou entre as variâncias dos escores produzidos pelos diferentes protocolos ao nível de 5 porcento de significância, ocasionando mudança na classificação do desempenho dos laboratórios. Conclui-se que os protocolos estatísticos alternativos propostos apresentaram a vantagem de dispensar o tratamento de outliers e a investigação da distribuição dos dados, sendo que o protocolo MADe ainda apresentou redução na incerteza de medição associada ao valor designado por consenso. / [en] The objective of this dissertation is to propose statistical protocols that are alternative to the current one applied by the American Society for Testing and Materials (ASTM) to determine the performance of participants laboratories of Proficiency Testing (PT) by using robust statistics. Participation in PT is a mandatory requirement for compliance in certifications and accreditations for testing and calibration laboratories. The ASTM EP Program employs the consensus value to provide the participants scores. The method for estimating the scores, ZASTM, is based on the sample data mean (assigned value, AV) and the sample data standard deviation (standard deviation for proficiency assesment, SDPA). In this case, it is necessary an exhaustive treating of the data, motivation for this study, including the treatment of outliers and the investigation of existence of normal distribution (Gaussian). In this study, the proposed protocols (nIQR and MADe) consider the application of robust statistics, which are more resistant to the presence of outliers, which cause deviations from the desired normality. The results of the ASTM protocol comparison with the proposed protocols in the lubricant oil matrix data reported to the ASTM provider show a difference between the means or between the variances of the scores produced by the different protocols at the 5 per cent level of significance, causing variation in the classification of laboratory performance. It is concluded that the proposed alternative statistical protocols had the advantage of dispensing the outliers treatment and the investigation of the data distribution, and the MADe protocol still showed reduction in the measurement

[pt] Nas últimas duas décadas o governo brasileiro tem investido vultosos recursos para promover o acesso às tecnologias de informação e comunicação nas escolas públicas do país. Os instrumentos normativos (decretos, leis, portarias) que instituem tais políticas enunciam como objetivo principal a melhoria da aprendizagem dos alunos, a partir do uso pedagógico de computadores, Internet e outros aparatos que se tornaram cotidianos a partir da sociedade da informação. Neste trabalho investigamos possíveis correlações entre o uso de TIC em escolas públicas brasileiras e o resultado médio destas mesmas escolas em testes de proficiência de larga escala. Para isso nos baseamos nos resultados da Prova Brasil 2011, e nos dados levantados, no mesmo ano, pela pesquisa TIC Educação; realizada pelo Comitê Gestor da Internet no Brasil. Neste segundo caso foram considerados os questionários aplicados a professores de quinto e nono anos do ensino fundamental, a partir dos quais foram desenvolvidos dois indicadores do uso pedagógico de TIC por professores, o que permitiu, posteriormente, medir o uso de TIC por escola. Os indicadores foram construídos a partir de modelos estatísticos utilizando a Teoria de Resposta ao Item (TRI). / [en] In the last two decades, the brazilian government has invested huge resources to promote the access to the information and communication technologies at the public schools. The regulatory instruments which establish such policies indicate as a major objective, the improvement of the student s academic achievement, from the educational use of computers, Internet, and other tool which are used daily, in the information society context. In this work we investigate possible correlations between the ICT use at brazilian public schools, and the results of these same schools in the national test of academic achievement. Our start point are the results of Prova Brasil 2011, and the data collected in the same year, by the TIC Educação, research realized by the Brazilian Internet Steering Committee. In the case of this second process, we have considered the interviews applied to the teachers of fifth and ninth year, of the basic level, from what was developed two indexes to measure the educational ICT use for each school. These indexes were developed from statistical models, using the Item response theory.

[pt] A participação de laboratórios clínicos em programas de ensaio de proficiência é uma importante ferramenta para gestão da qualidade. A maior parte das avaliações de desempenho de laboratórios clínicos por ensaio de proficiência se realiza com base no critério Z-Score, cujo valor designado é o consenso de resultados obtidos pelos participantes da rodada de proficiência, que é fortemente dependente da qualidade dos sistemas analíticos dos participantes. Utilizando uma base de dados fornecida por um provedor de ensaios de proficiência acreditado pelo INMETRO, este trabalho compara o desempenho de critérios para a avaliação da proficiência de laboratórios clínicos para medição de glicose. Consideraram-se não só critérios comumente utilizados, mas também novos critérios propostos que independem do consenso, baseados apenas em parâmetros associados ao valor designado pelo material de referência. As discrepâncias de classificação de desempenho dos laboratórios em função dos critérios de avaliação empregados indicaram inadequações da classificação baseada em critérios com parâmetros afetados pelo consenso entre participantes. O estudo também permitiu caracterizar o desempenho dos sistemas analíticos empregados pelos participantes, evidenciando-se uma discrepância significativa entre seus resultados. Os resultados do presente trabalho possibilitam analisar o impacto dos critérios utilizados no ensaio de proficiência para a adequada avaliação do desempenho dos laboratórios, contribuindo, assim, para a garantia da confiabilidade dos diagnósticos clínicos e condutas terapêuticas. / [en] The participation of clinical laboratories in proficiency testing programs is an important tool for quality management. Most evaluations of clinical laboratory performance by proficiency testing are carried out based on the Z-Score criterion; whose assigned value is the consensus of results obtained by the participants of the round, which is heavily dependent on the quality of analytical systems of participants. Using a database provided by a proficiency testing provider accredited by INMETRO, this paper compares the performance of criteria for the assessment of proficiency of clinical laboratories for measuring glucose. The analysis considered not only commonly used criteria, but also new proposed criteria that are independent of the consensus effect, based only on parameters associated with the assigned value defined by the reference material. The observed discrepancies in the performance rating of laboratories, according to the evaluation criteria employed, allowed the evidencing of inadequacies in the classifications based on criteria using parameters affected by the consensus among participants. The study also characterized the performance of analytical systems employed by the laboratories, evidencing a significant discrepancy between the results its. The present work allowed a better understanding of the impact of criteria applied in proficiency testing programs on the adequacy of evaluation of laboratories performance, thus contributing to ensuring the reliability of clinical diagnostics and therapeutical procedures.