Submitted by Renata Lopes (renatasil82@gmail.com) on 2016-07-25T11:54:13Z No. of bitstreams: 1 meirianeferreiravieira.pdf: 1045445 bytes, checksum: 9ce4db6356f8562268bf722ecff3fd89 (MD5) / Approved for entry into archive by Adriana Oliveira (adriana.oliveira@ufjf.edu.br) on 2016-07-25T16:33:28Z (GMT) No. of bitstreams: 1 meirianeferreiravieira.pdf: 1045445 bytes, checksum: 9ce4db6356f8562268bf722ecff3fd89 (MD5) / Made available in DSpace on 2016-07-25T16:33:28Z (GMT). No. of bitstreams: 1 meirianeferreiravieira.pdf: 1045445 bytes, checksum: 9ce4db6356f8562268bf722ecff3fd89 (MD5) Previous issue date: 2015-12-21 / A presente dissertação foi desenvolvida no âmbito do Mestrado Profissional em Gestão e Avaliação da Educação (PPGP) do Centro de Políticas Públicas e Avaliação da Educação da Universidade Federal de Juiz de Fora (CAEd/UFJF). O caso de gestão estudado discute a questão do desequilíbrio entre rendimento escolar interno e desempenho nas avaliações do SADEAM na Escola Estadual André Vidal de Araújo. Os objetivos definidos para este estudo foram analisar as ações desenvolvidas na escola que ocasionaram um fenômeno divergente entre os indicadores: houve aumento na taxa de aprovação interna e diminuição no desempenho dos alunos na avaliação externa do SADEAM, nos anos de 2008, 2010 e 2012, e verificar o perfil da equipe gestora e professores no que diz respeito às práticas pedagógicas relacionadas à avaliação interna e externa do SADEAM. Para tanto, utilizamos como metodologia a análise documental de registros nos diários de classe, planos de curso, planos de intervenção pedagógica, atas de reuniões pedagógicas e de planejamento, instrumentos de controle da Hora de Trabalho Pedagógico (HTP) e entrevistas semiestruturadas realizadas com o gestor, coordenador pedagógico e professores. A revisão bibliográfica teve como base as ideias de Lück (2009), Silva (2013), Soares (2002) e Libâneo (2004). Diante do estudo, conclui-se que a gestão escolar necessita desenvolver suas ações orientada por um planejamento estratégico que ofereça formação para que a equipe dos professores possa desenvolver uma compreensão do processo de apropriação dos resultados das avaliações externas e a utilização dessas informações numa perspectiva pedagógica. Ou seja, serem capazes de apropriarem-se dos resultados e relacioná-los ao fazer pedagógico que desenvolvem. Frente a isso, o Plano de Ação Educacional apresentado traz três ações de formação que podem possibilitar que os resultados nas avaliações externas e internas sejam igualmente indicadores que provoquem melhorias na qualidade do ensino da escola pesquisada. / This dissertation was developed within the framework of the master in management and evaluation of education (PPGP) from the Centre of public policies and evaluation of education of the Federal University of Juiz de Fora (UFJF/CAEd). The case studied management discusses the question of the imbalance between school performance and internal performance in SADEAM ratings on State school André Vidal de Araújo. The objectives defined for this study were to analyze the actions undertaken in the school that resulted in a phenomenon divergent between the indicators: There was an increase in the rate of approval and internal performance decreased of students in the external evaluation of the SADEAM, in the years of 2008, 2010 and 2012, and check the profile of the team manager and teachers with respect to the pedagogical practices related to internal and external assessment of the SADEAM. To this end, we use as documentary records analysis methodology in class daily, travel plans, educational intervention plans, minutes of meetings and planning, pedagogical instruments to control the Time of pedagogical work (HTP) and interviews with the Manager semi-structured, educational coordinator and teachers. The literature review was based on the ideas of Lück (2009), Silva (2013), Soares (2002) and Libâneo. Before the study, it is concluded that the school management needs to develop its actions oriented by a strategic planning that provide training for which the team of teachers can develop an understanding of the process of ownership of the results of the external evaluations and the use of such information in a pedagogical perspective. I.e., being able to take ownership of the results and relate them to the pedagogical doing that develop. Front of this Educational Action Plan brings three training actions that can enable the results in external and internal evaluations are also indicators that lead to improvements in the quality of school education research.

Submitted by Geandra Rodrigues (geandrar@gmail.com) on 2018-09-27T18:30:10Z No. of bitstreams: 1 patriciadelimapaula.pdf: 1706323 bytes, checksum: 84f84ffc85eea8a9055919c187c62730 (MD5) / Approved for entry into archive by Adriana Oliveira (adriana.oliveira@ufjf.edu.br) on 2018-10-01T18:03:06Z (GMT) No. of bitstreams: 1 patriciadelimapaula.pdf: 1706323 bytes, checksum: 84f84ffc85eea8a9055919c187c62730 (MD5) / Made available in DSpace on 2018-10-01T18:03:06Z (GMT). No. of bitstreams: 1 patriciadelimapaula.pdf: 1706323 bytes, checksum: 84f84ffc85eea8a9055919c187c62730 (MD5) Previous issue date: 2018-07-05 / A presente dissertação é desenvolvida no âmbito do Mestrado Profissional em Gestão e Avaliação da Educação (PPGP) do Centro de Políticas Públicas e Avaliação da Educação da Universidade Federal de Juiz de Fora (CAEd/UFJF). O caso de gestão estudado discutiu o processo de elaboração dos itens integrantes dos testes de proficiência de três programas de avaliação: o Sistema de Avaliação Educacional do Desempenho Educacional do Amazonas (SADEAM), o Programa de Avaliação do Espírito Santo (PAEBES) e o sistema de Avaliação Baiano da Educação (Avalia BA). Os objetivos definidos para este estudo foram baseados em compreender os fatores que interferem na qualidade dos itens de biologia nas avaliações dos Programas de Avaliação no período de 2010 a 2015. Para alcançar tal objetivo, foi necessário descrever as análises estatísticas dos relatórios gerados pelo Centro de Políticas Públicas e Avaliação da Educação (CAEd) que serviram de base para o estudo. Assumimos como hipótese o fato de vários itens dos conteúdos de biologia apresentarem baixos percentuais de acerto, além de um quantitativo elevado de itens eliminados. Para tanto, utilizamos, como metodologia de pesquisa a realização de uma análise psicométrica dos itens de Biologia do Ensino Médio com baixos percentuais de acerto dos Programas de Avaliação SADEAM, PAEBES e AVALIA BA e, a partir disso, a realização de análises pedagógicas, utilizando, como instrumentos, os relatórios estatísticos gerados pela Coordenação de Instrumentos de Avaliação (CIA) que apresentam o comportamento estatístico de cada item dos testes de proficiência aplicados. / The present dissertation is developed in the Mestrado Profissional em Gestão e Avaliação da Educação (PPGP) do Centro de Políticas Públicas e Avaliação da Educação da Universidade Federal de Juiz de Fora (CAEd/UFJF). The management case studied discussed the process of elaborating the items that are part of the proficiency tests of three evaluation programs: the Educational Evaluation System of the Educational Performance of Amazonas (SADEAM), the Evaluation Program of the State of Espírito Santo (PAEBES) and the Baiano Education Assessment System (Evaluates BA). The objectives defined for this study were based on understanding the factors that influence the quality of biology items in the evaluation of the Evaluation Programs in the period from 2010 to 2015. To achieve this goal, it was necessary to describe the statistical analyzes of the reports generated by the Centro de Políticas Públicas e Avaliação da Educação (CAEd), that served as the basis for the study. We assume as hypothesis the fact that several items of the contents of biology present low percentages of correctness, besides a high quantitative of eliminated items. To do so, we used as a research methodology the performance of a psychometric analysis of the items of High School Biology with low percentage of correctness of the Evaluation Programs SADEAM, PAEBES and AVALIA BA Evaluation and, from this, the accomplishment of pedagogical analyzes, using , as instruments, statistical reports generated by the Coordination of Assessment Instruments (CIA) that present the statistical behavior of each item of applied proficiency tests.

Orientador: Paula Tavares Pinto / Banca: Douglas Altamiro Consolo / Banca: Vander Viana / Resumo: A presente pesquisa de mestrado teve por objetivo o desenvolvimento de atividades didáticas em língua inglesa com base em corpora com o foco no desenvolvimento da compreensão oral para alunos em nível A2 e B1. Para tanto, a Linguística de Corpus serviu com aparato teórico-metodológico, e as atividades preparadas foram aplicadas em um minicurso de 12 horas ministrado em uma instituição de ensino superior tecnológico, no noroeste do estado de São Paulo. Os alunos participantes estavam no último ano de suas graduações e ao terminarem o curso eles têm a oportunidade de se submeterem a aplicação do exame de proficiência internacional TOEFL. A necessidade desta pesquisa se deu após o resultado do mapeamento de proficiência em língua inglesa dos alunos brasileiros revelarem um nível insuficiente para o acompanhamento das atividades acadêmicas em universidades do exterior (ABREU LIMA, MORAES FILHO, 2016). Como metodologia de pesquisa, utilizamos o programa AntConc® como ferramenta para a realização das análises e descrições lexicais do corpus de estudo para a pesquisa, que foi compilado a partir das transcrições de 71 palestras retiradas do site TED (www.ted.com) e de 56 transcrições das animações do site TED-ED (https://ed.ted.com/). A partir dos dados obtidos por meio das análises do corpus de estudo, foram propostas, e posteriormente aplicadas, atividades com o foco na compreensão oral em língua inglesa. Como fundamentação teórica, tomamos como base os conceitos de Inglês para... / Abstract: This master's research aimed at the designing of corpus-based activities in English, focusing on the development of the oral comprehension for students at levels A2 and B1. To that end, Corpus linguistics was used as a theoretical-methodological apparatus, and the activities were applied in a mini-course of 12 hours taught at a higher education institution in the northwest of the state of São Paulo. The participating students were in the last year of their undergraduate studies and upon finishing the course they have the opportunity to apply for the international proficiency exam TOEFL. The need for this research came after the mapping of Brazilian students' level of English revealed an insufficient proficiency to follow academic activities in universities abroad (ABREU LIMA, MORAES FILHO, 2016). As a research methodology, we used the Antconc® program as a tool to perform lexical analyzes and descriptions. The corpus of study for this research was compiled from the transcripts of 71 lectures taken from the TED website (www.ted.com) and 56 transcripts of the TED-ED website animations (https://ed.ted.com/). From the data obtained through the analysis of the corpus of study, activities focused on listening comprehension in English were proposed and then applied to students. As a theoretical basis, we followed the concepts of English for Academic Purposes (FLOWERDEW, 2001, CHARLES, 2013, HYLAND, 2006), Corpus Linguistics (CHARLES, 2012, MCENERY, XIAO, 2011, BERBER SARDINHA, 2010) ... / Mestre

Percorremos nessa pesquisa caminhos entre a leitura, tradução e avaliação que muitas vezes se cruzam, como na didática de línguas e nos estudos cognitivos. Os processos e estratégias de tradução, forçosamente, demandam variados tipos de leitura em língua estrangeira que, por sua vez, ativam outras estratégias em diferentes momentos, como a leitura do texto traduzido feita em comparação ao texto original, denominada leitura crítica da tradução. A prática da tradução exercita a leitura, ao mesmo tempo em que faz com que o leitor-tradutor reflita sobre suas próprias atividades e percursos. A avaliação da compreensão escrita de um texto em língua estrangeira é a finalidade dos exames universitários de proficiência que representam uma das etapas exigidas durante processo seletivo para o mestrado e doutorado nos programas de pósgraduação. Esses exames podem ter diferentes modalidades dentro de um mesmo centro aplicador ou universidade, como acontece na USP. Em alguns casos, exige-se a tradução, se não integral, de um trecho do texto para o qual também são feitas outras questões: dissertativas, múltipla escolha ou opção por verdadeiro ou falso. Nessa pesquisa, analisamos as traduções de trechos de textos de exames de proficiência em francês feitas por candidatos aos programas de pós-graduação para o mestrado e doutorado na ECA, nos anos 2002, 2004, 2005 e 2006, e na Faculdade de Letras, nos anos 2004, 2006 e 2007. Os trechos de tradução foram inseridos no programa WordSmith Tools, que ajuda a visualizar um corpus para que seja analisado, por isso muito usual nas pesquisas em Linguística de Corpus. Confrontamos nossas postulações de erros com as soluções, dificuldades, problemas e procedimentos encontrados no corpus. Considerando o objetivo do exame de proficiência e como não há indícios de um método de correção da tradução no corpus, procuramos distinguir os erros de leitura dos de expressão escrita e compreender as estratégias utilizadas pelos candidatos. Essa distinção deveria estar presente nos critérios de correção que deveriam ser explicitados pelos elaboradores para que pudessem ser conhecidos de antemão pelos candidatos. Dentro da USP, é crescente a busca por preparo aos exames de proficiência nos cursos instrumentais, entre eles o de francês, que têm como principal foco a compreensão de textos em língua estrangeira. Para que os atuais alunos leiam suas bibliografias e sendo, alguns desses também futuros candidatos a essas provas, devese atentar para os exercícios de tradução, já que esses trabalham e revelam a compreensão do leitor-tradutor. Nosso objetivo é refletir sobre os critérios de avaliação dos exames e contribuir para o ensino da leitura em FLE, auxiliando os cursos instrumentais a incorporarem a prática da tradução, apresentando seus benefícios para a leitura. / In this research we go through the paths between reading, translation and assessment that often intersect, like in language teaching and cognitive studies. The processes and strategies of translation strongly require different kinds of reading in a foreign language, which, in their turn, activate other strategies at different times, like reading the translated text and comparing it to the original text, which is called critical reading of translation. The practice of translating exercises the reading process, at the same time that it makes the reader-translator reflect on their own activities and pathways. The assessment of reading comprehension of a text in a foreign language is the purpose of the university proficiency exams that represent one of the steps required during the selection process for masters and doctorate programs in graduate school. These exams may have different modalities within a single applying centre or university, as it occurs at USP. In some cases it is required the translation of a texts extract, if not the whole text, and questions about it are made, which can be in form of essay, multiple choice or true or false options. In this research, we analyse the translation of excerpts from texts of French proficiency exams taken by candidates for postgraduate programs for master\'s and doctorate at ECA, in the years 2002, 2004, 2005 and 2006, and at the Faculty of Arts, University of Sao Paulo, in the years 2004, 2006 and 2007. The excerpts were entered into the translation program WordSmith Tools, which helps to visualise a corpus that will be analysed, being very used in Corpus Linguistics polls. We confronted our supposed mistakes with the solutions, difficulties, problems and procedures found in the corpus and verified whether the exercise of translation reveals (in) comprehension by the candidates. Inside USP there is an increase of search for reading courses that prepare to the proficiency exams, and that includes the Reading in French course, which focuses on reading comprehension in a foreign language. For the current students to read their bibliographies, and being some of them future candidates to the proficiency exams, it is important that the reading courses give special attention to the translation exercises, since they show and work on the comprehension of the reader-translator. Our aim is to reflect on the assessment criteria of the exams and contribute to the teaching of reading in FFL, assisting reading courses to incorporate the practice of translation, by presenting its benefits for reading.

O crescimento do número de laboratórios acreditados na ISO 17025:2005, ocasionou, por consequência, um aumento na demanda de diversos serviços relacionados a manutenção destes tipos de sistema. Um Item de grande importância da norma ressalta a importância da garantia da qualidade de resultados de ensaio, uma maneira de se verificar isto é através da participação em um tipo de ensaio interlaboratorial conhecido como programa de ensaio de proficiência ou EP. Este tipo de serviços apresentou um crescimento considerável em sua demanda, especialmente no território nacional, devido a um requisito do próprio INMETRO presente na NIT DICLA-026, o qual exige que um laboratório participe de um EP para que o mesmo se torne elegível a obter a sua acreditação em ISO 17025:2005. Com o aumento em sua demanda, surge o interesse por parte dos provedores de ensaios de proficiência de otimizar seus processos sem que os requisitos da qualidade sejam comprometidos. Uma maneira de se atingir este objetivo é através da modernização de seus sistemas de armazenamento de informação e cálculos para um sistema computadorizado. Entretanto o mercado não apresenta ferramentas especialmente desenvolvidas para esta finalidade, e as utilizadas para isto não apresentam todas as características exigidas pelas normas ISO 17025:2005 e ISO 17043:2011 e, para serem utilizadas neste tipo de ambiente, exigem longos processos de avaliação e validação dos sistemas atuais. Em muitos casos o usuário é forçado a utilizar múltiplos softwares ao longo do processo, tornando todo o processo ainda mais passível de erros e, em casos extremos, gerando erros na apresentação de resultados finais. Portanto, surge a necessidade do desenvolvimento de uma ferramenta computacional especializada e desenvolvida com o foco neste tipo especifico de laboratório, atendendo aos requisitos normativos e trazendo características úteis para uma melhor otimização do processo. / The growth in the number of laboratories certified in the ISO 17025:2005 triggered, therefore, an increase in the demand for several services related to the maintenance of these kinds of systems. One very important topic in the standard emphasizes on the importance of the assurance of the quality of the result obtained, which may be verified by participating in a type of interlaboratory tests known as proficiency testing programs or PT. These types of services have grown considerably in demand., especially in the national territory, due to a requirement of INMETRO present on the standard NIT DICLA-026, which demands that laboratories take place on EP to become eligible for an accreditation in ISO 17025:2005. With its increase in demand, it becomes more interesting for proficiency test providers to optimize their systems all the while without compromising their quality, one of the ways of achieving this objective is through and upgrade on their information storage systems and calculation systems to a computerized one. However, the market does not feature specialized tools developed for this specific task, and the ones being used for this goal do not feature all of the characteristics required by the ISO 17025:2005 and ISO 17043:2011 standards, and, therefore, require a long process of evaluation and validation for being used in this type of environment. In a lot of cases its also common that the enterprise is forced to use multiple software\'s throughout the process, making the entire process more susceptible to mistakes and in extreme cases even generating mistakes that might be present on the end results sent to the client. Therefore, the necessity of developing a specialized computer tool arises, one developed focused specifically on these types of laboratories, complying with every requirement made by the standard and bringing with it useful features for a better optimization of the process.

O presente estudo tem como objetivo testar o argumento de que as escolas públicas modificaram a sua estratégia educacional ao buscar o aumento do seu Índice de Desenvolvimento da Educação Básica (IDEB) após 2007 (ano da criação desse índice). A base do argumento é que essa mudança de estratégia foi no sentido de alocar maiores investimentos e esforços educacionais nos alunos com as melhores chances de apresentarem os maiores ganhos de proficiência na Prova Brasil, o que poderia aumentar a desigualdade de proficiência dentro das escolas. Os nossos resultados indicam evidências para rejeitar esse argumento inicial. Há evidências de que as escolas, que aumentaram o IDEB entre 2007 e 2009, reduziram a desigualdade de proficiência dos seus alunos. Além disso, existem evidências de que a desigualdade entre diferentes escolas pode estar aumentando. / The present study aims to test our argument that public schools changed their educational strategies while trying to increase their IDEB (educational quality index) between 2007 and 2009. This argument is about an increase in the educational investments and efforts from schools into their students, specifically those that presented the highest chances to obtain the largest achievement gains. These investments and efforts would contribute to increase the achievement inequality within schools. Ours results shows evidence to reject our argument. There is evidence that these schools contributed to lower the achievement inequality between their students. We also find evidence that achievement inequality may be increasing between schools.

O presente estudo analisa o Certificado de Proficiência em Língua Portuguesa para Estrangeiros, Celpe-Bras, como instrumento de política linguística, entendido como uma avaliação orientada para o uso (Shohamy, 2006, 2007; McNamara, 2010, Da Silva, 2011). Através da coleta de materiais documentais e da revisão de literatura, este trabalho busca a) problematizar o uso e a implicação do uso dos termos instrumento de política linguística para tratar de exames de línguas, b) analisar se o Celpe-Bras é um instrumento de política linguística e c) se sim, como é utilizado. Partindo do entendimento de políticas linguísticas como processos complexos sujeitos a interpretações dos agentes que as implementam (Johnson, 2013) e de que as políticas linguísticas expressas em textos e discursos não necessariamente correspondem à política linguística efetiva (Shohamy, 2006), as análises aqui empreendidas verificam quais são os propósitos declarados e os objetivos de política linguística quando da criação do Celpe-Bras – o que aparece nos documentos e discursos – e como esses propósitos e objetivos se materializam, atentando para instâncias de repercussão do Celpe-Bras. As análises também identificam pautas econômicas, sociais, políticas, ideológicas e culturais com as quais o Celpe-Bras se vincula, e explicitam como se dá esse vínculo. O trabalho aponta para o Celpe-Bras como um instrumento de política linguística, utilizado por professores, pesquisadores, profissionais e docentes de universidades ligados à área de PLA para a implementação de políticas linguísticas, cujos efeitos vão além da pauta educacional. Esses agentes não apenas implementam as políticas, como também se apoderam do construto teórico do Celpe-Bras como orientador para planejarem aulas, discutirem conceitos, fornecerem explicações, estruturarem currículos etc. Eles são, portanto, ativos no processo de criação e implementação de políticas linguísticas. O presente estudo visa a contribuir para um melhor entendimento sobre o papel do Celpe-Bras e dos agentes envolvidos na conversão de políticas em materializações, bem como legitimar o exame como avaliação de proficiência do português brasileiro. / The current study analyzes the Certificate of Proficiency in Portuguese for Foreigners, Celpe-Bras, as an instrument of language policy, understood as a use oriented testing (Shohamy, 2006, 2007; McNamara, 2010, Da Silva, 2011). By means of collecting documentary materials and reviewing the literature, this research seeks to a) problematize the use and the implication of the use of the terms instrument of language policy to deal with language exams, b) analyze if Celpe-Bras is an instrument of language policy and c) if so, how it is utilized. Building on the understanding of language policies as complex processes subject to interpretation of the agents who implement them (Johnson, 2013) and that the language policies expressed in texts and discourses don't necessarily correspond to the real language policy (Shohamy, 2006), the analyzes here undertaken verify what the intentions and objectives when Celpe-Bras was created are – what appears in documents and discourses – and how these intentions and objectives materialize, attempting to instances of repercussion of Celpe-Bras. The analyzes also identify economic, social, political, ideological and cultural agendas with which Celpe-Bras is attached to, and how this connection happens. The study points to Celpe-Bras as an instrument of language policy, utilized by teachers, researchers, professionals and scholars related to the Portuguese as an Additional Language (PAL) area for the implementation of language policies, whose effects go beyond the educational agenda. These agents not only implement the policies, but also appropriate the theoretical construct of Celpe-Bras as a guiding for planning classes, discussing concepts, delivering explanations, structuring curricula etc. They are, therefore, active in the process of creation and implementation of language policies. The current study aims at contributing for a better understanding of the role of Celpe-Bras and the agents involved in the conversion of policies into materializations, as well as legitimating the exam as proficiency assessment of Brazilian Portuguese.

Os ensaios de proficiência têm sido utilizados, por laboratórios de ensaio e calibração acreditados sob a norma ISO/IEC 17025 (General requirements for the competence of testing and calibration laboratories), como principal mecanismo para garantia da qualidade de seus resultados. Além de atender a um requisito normativo, a participação satisfatória neste tipo de atividade é utilizada, por organismos acreditadores, como condição à obtenção e manutenção da acreditação. Entretanto, existe uma carência por provedores de ensaios de proficiência acreditados de acordo com a norma ISO/IEC 17043 (Conformity assessment — General requirements for proficiency testing), o que causa dificuldades aos laboratórios. Esta dissertação teve como objetivo analisar a viabilidade de que laboratórios acreditados à ISO/IEC 17025 atuem, simultaneamente, como provedores de ensaios de proficiência, acreditados à ISO/IEC 17043. Para isso, foram estabelecidas as relações entre os itens das normas, identificadas e analisadas as exigências adicionais e adaptações necessárias no sistema de gestão, identificados os potenciais conflitos de interesses e estabelecidas propostas de atendimento para cada item normativo afetado. Os artigos que constituem esta pesquisa foram validados por um grupo de especialistas na área da metrologia, sendo as suas opiniões consideradas nos estudos realizados. Conclui-se, ao final, que a atuação simultânea proposta é viável, exigindo adaptações no sistema de gestão e procedimentos complementares referentes à confidencialidade e à imparcialidade. Como resultado prático, espera-se minimizar a carência por este serviço, sem comprometer sua confiabilidade. / Proficiency tests have been used by testing and calibration laboratories accredited to the ISO/IEC 17025 standard (General requirements for the competence of testing and calibration laboratories) as the main mechanism for assuring the quality of their results. Besides attending to a normative requirement, the satisfactory participation in this kind of activity is used by accreditation bodies as a condition to obtaining and maintaining the accreditation. However, there is a lack of proficiency testing providers accredited according to the ISO/IEC 17043 standard (Conformity assessment — General requirements for proficiency testing), which causes laboratories to have difficulties. This thesis had as its goal to analyze the viability of laboratories accredited to the ISO/IEC 17025 acting simultaneously as proficiency testing providers, accredited to the ISO/IEC 17043. For that, relations between the items of both standards have been established, additional requirements and necessary adaptations in the management system have been identified and analyzed, potential conflicts of interest have been identified and solutions have been proposed for each normative item. A group of experts in the field of metrology validated the articles that constitute this research and their opinions have been considered in the studies. At the end, the conclusion was that the proposed simultaneous acting is viable, requiring adaptations in the management system and complementary procedures referring to confidentiality and impartiality. As a practical result, it is hoped to minimize the shortage for this kind of service, without compromising its reliability.

O crescimento do número de laboratórios acreditados na ISO 17025:2005, ocasionou, por consequência, um aumento na demanda de diversos serviços relacionados a manutenção destes tipos de sistema. Um Item de grande importância da norma ressalta a importância da garantia da qualidade de resultados de ensaio, uma maneira de se verificar isto é através da participação em um tipo de ensaio interlaboratorial conhecido como programa de ensaio de proficiência ou EP. Este tipo de serviços apresentou um crescimento considerável em sua demanda, especialmente no território nacional, devido a um requisito do próprio INMETRO presente na NIT DICLA-026, o qual exige que um laboratório participe de um EP para que o mesmo se torne elegível a obter a sua acreditação em ISO 17025:2005. Com o aumento em sua demanda, surge o interesse por parte dos provedores de ensaios de proficiência de otimizar seus processos sem que os requisitos da qualidade sejam comprometidos. Uma maneira de se atingir este objetivo é através da modernização de seus sistemas de armazenamento de informação e cálculos para um sistema computadorizado. Entretanto o mercado não apresenta ferramentas especialmente desenvolvidas para esta finalidade, e as utilizadas para isto não apresentam todas as características exigidas pelas normas ISO 17025:2005 e ISO 17043:2011 e, para serem utilizadas neste tipo de ambiente, exigem longos processos de avaliação e validação dos sistemas atuais. Em muitos casos o usuário é forçado a utilizar múltiplos softwares ao longo do processo, tornando todo o processo ainda mais passível de erros e, em casos extremos, gerando erros na apresentação de resultados finais. Portanto, surge a necessidade do desenvolvimento de uma ferramenta computacional especializada e desenvolvida com o foco neste tipo especifico de laboratório, atendendo aos requisitos normativos e trazendo características úteis para uma melhor otimização do processo. / The growth in the number of laboratories certified in the ISO 17025:2005 triggered, therefore, an increase in the demand for several services related to the maintenance of these kinds of systems. One very important topic in the standard emphasizes on the importance of the assurance of the quality of the result obtained, which may be verified by participating in a type of interlaboratory tests known as proficiency testing programs or PT. These types of services have grown considerably in demand., especially in the national territory, due to a requirement of INMETRO present on the standard NIT DICLA-026, which demands that laboratories take place on EP to become eligible for an accreditation in ISO 17025:2005. With its increase in demand, it becomes more interesting for proficiency test providers to optimize their systems all the while without compromising their quality, one of the ways of achieving this objective is through and upgrade on their information storage systems and calculation systems to a computerized one. However, the market does not feature specialized tools developed for this specific task, and the ones being used for this goal do not feature all of the characteristics required by the ISO 17025:2005 and ISO 17043:2011 standards, and, therefore, require a long process of evaluation and validation for being used in this type of environment. In a lot of cases its also common that the enterprise is forced to use multiple software\'s throughout the process, making the entire process more susceptible to mistakes and in extreme cases even generating mistakes that might be present on the end results sent to the client. Therefore, the necessity of developing a specialized computer tool arises, one developed focused specifically on these types of laboratories, complying with every requirement made by the standard and bringing with it useful features for a better optimization of the process.

Este trabalho investiga como os examinadores do exame de proficiência IELTS atuando no Brasil utilizam a grade de avaliação da entrevista oral do exame buscando os critérios focalizados para a tomada de decisão em relação às notas atribuídas. Foram analisadas as transcrições de cinco entrevistas com examinadores de IELTS que avaliaram o desempenho de um mesmo candidato durante uma entrevista gravada em vídeo para fins desta pesquisa. Os comentários avaliativos dos examinadores entrevistados foram classificados conforme referencias a um dos quatro critérios descritos na grade de avaliação utilizada – Fluência e Coerência, Recursos Lexicais, Abrangência e Correção Gramaticais e Pronúncia. A análise das notas atribuídas ao candidato e dos comentários dos examinadores revelou uma maior dificuldade na avaliação dos critérios Fluência e Coerência e Pronúncia, e a subsequente análise dos comentários em relação aos componentes de cada critério salientes durante a avaliação indicou como relevantes para a avaliação deste candidato justamente alguns dos pontos de sobreposição entre Fluência e Pronúncia – velocidade de fala, chunking e ritmo. Além de indicar pontos de sobreposição entre os critérios, os comentários dos examinadores revelaram dificuldades em relação à interpretação dos critérios, por exemplo, quanto a levar em consideração ou não um modelo de falante nativo imaginado, ou quanto a inferir os contextos futuros de uso da língua do candidato, bem como dificuldades quanto à condução da entrevista oral de proficiência do IELTS, como em manter os papeis de interlocutor e avaliador considerando todos os descritores da grade analítica utilizada. As questões levantadas pela análise dos comentários dos examinadores para este estudo podem contribuir para a discussão sobre a utilização de grades analíticas para entrevistas de proficiência oral, bem como sobre a separabilidade ou não dos critérios de avaliação das mesmas. / This study investigates how IELTS examiners working in Brazil use the Speaking Band Descriptors and searches for the criteria they focus when deciding on the grades given. The transcriptions of five interviews with IELTS examiners who assessed the performance of the same candidate in a video interview specifically done for this study were analyzed. The assessing comments of the examiners were classified according to references to one of the four criteria described in the scale used – Fluency and Coherence, Lexical Resource, Grammatical Range and Accuracy and Pronunciation. The analysis of the grades given to the candidate and of the examiners’ comments showed that the examiners had more difficulty with the criteria Fluency and Coherence and Pronunciation. The analysis of the comments in relation to the salient components of the criteria indicated that they considered relevant to the assessment of this candidate some of the overlapping criteria between Fluency and Pronunciation – speech rate, chunking and rhythm. Besides indicating overlaps between the criteria, the examiners pointed out their difficulties in interpreting the criteria, for example, in relation to taking into consideration or not the ideal native-speaker standard, or their inferences about the candidate’s future contexts of language use, as well as difficulties related to the IELTS oral interview procedures, such as playing both the interlocutor and assessor roles while considering all the descriptors included in the scales. The issues raised by the analysis of the examiners’ comments in this study may contribute to the debate on the use of analytic scales for oral proficiency interviews, as well as on the distinctiveness of the assessing criteria.