Submitted by Fabio Sobreira Campos da Costa (fabio.sobreira@ufpe.br) on 2017-10-30T15:14:35Z No. of bitstreams: 2 license_rdf: 811 bytes, checksum: e39d27027a6cc9cb039ad269a5db8e34 (MD5) PMGP-ME_MUDANCAS_NO_TRABALHO_DOCENTE_SIMONE_A.NOBREGA.pdf: 1017174 bytes, checksum: 33f5befb47eada2910fe3d164c175778 (MD5) / Made available in DSpace on 2017-10-30T15:14:35Z (GMT). No. of bitstreams: 2 license_rdf: 811 bytes, checksum: e39d27027a6cc9cb039ad269a5db8e34 (MD5) PMGP-ME_MUDANCAS_NO_TRABALHO_DOCENTE_SIMONE_A.NOBREGA.pdf: 1017174 bytes, checksum: 33f5befb47eada2910fe3d164c175778 (MD5) Previous issue date: 2016-09-06 / CAPES / O presente trabalho versa sobre o Programa de Modernização da Gestão Pública – metas para a educação (PMGP-ME), que foi implementado no Estado de Pernambuco a partir de 2008 com o intuito de melhorar o índice do IDEB. O programa é estruturado com base na tríade: metas, monitoramento/avaliação e bonificação. Uma combinação que tem ganhado ênfase nas políticas educacionais de alguns estados brasileiros e que vem se constituindo em uma nova forma de regulação sobre o trabalho docente. Este estudo tem como objetivo geral analisar o PMGP-ME, buscando compreender o discurso da modernização da gestão e suas repercussões para o trabalho docente e para a valorização profissional nas escolas estaduais de Pernambuco. Partiu-se do pressuposto que uma nova organização educacional, centrada em metas, avaliações e, principalmente, em bonificação traz aos profissionais docentes impactos e mudanças em seu trabalho. A pesquisa está pautada numa abordagem qualitativa e coletou dados primários a partir da aplicação de entrevistas a professores e gestores escolares de escolas estaduais localizadas em municípios da Região Agreste de Pernambuco. A reflexão está pautada na análise do discurso fundamentada em Fairclough (2001) que trata o discurso como a própria prática social. Os resultados revelaram que o PMGP-ME adota o discurso de uma gestão gerencial que pressupõe uma concepção de trabalho docente pautado por uma prática de aumento do trabalho, estabelecimento de metas, cobrança de resultados, apontando para a intensificação do trabalho docente, de modo que o mesmo passa a ser interpelado por esse tipo de discurso gerencialista. Nesse modelo de gestão, os profissionais são levados a ajustar-se a esta lógica, para tanto, o Estado conta com a regulação, por meio do monitoramento, avaliação anual e incentivo financeiro para os profissionais. Os resultados das análises das entrevistas apontaram que diferentes discursos permeiam o espaço escolar: há concordâncias, discordâncias e muitas incertezas. Foi possível encontrar professores que concordam com a política em ação, que encontram no PMGP-ME pontos positivos, mas que também conseguem observar seus limites. Na discussão acerca de como o programa se efetiva na prática, foi possível perceber três aspectos que se efetivam na prática escolar: a) Práticas verticalizadas tanto nas ações, como na tomada de decisões; b) A regulação sobre o trabalho escolar e o trabalho docente; e. c) Modificações, adaptações e dificuldades no/do contexto escolar, decorrentes da implementação do Programa. Os entrevistados revelam que a concepção docente sobre a valorização profissional, perpassa pela construção de uma carreira profissional, reconhecimento profissional e financeiro, formação, entre outros aspectos. Ainda, o Bônus é apontado por muitos profissionais como um incentivo financeiro, mas não está diretamente ligado à valorização profissional. Em contrapartida, há profissionais que acreditam e apostam no bônus como valorização profissional. Em suma, percebeu-se que: a) o programa efetiva práticas gerencialistas de um Estado-avaliador, que tem como premissa controle dos resultados; b) há mudanças no discurso dos docentes envolvidos na implementação do programa, bem como é possível perceber a resistência a um modelo de modernização que foca nos números. / This work deals with the Program for Modernization of Public Management - goals for education (PMGP-ME), which is carried out in Pernambuco since 2008 aiming to improve the IDEB index. The program is built on the following triad: targets, monitoring/evaluation and bonus; a combination that has excelled in educational politics in some of Brazilian states and that has instituting a new way of regulation of teaching jobs. This study aims to analyze the PMGP-ME, seeking to understand the discourse of management modernization and its impact on the teaching profession and for professional appreciation in state schools in Pernambuco. This study works with the assumption that a new educational organization focused on targets, evaluation and, mainly, bonus brings to professional teachers impacts and changes in their work. The research is built on a qualitative approach and primary data from the application of interviews with teachers and school managers of state schools located in municipalities in the region Agreste of Pernambuco. The reflection is guided by the discourse analysis based on Fairclough (2001) which deals with the speech as its own social practice. The results revealed that the PMGP-ME adopts the discourse of managerial management that assumes a teaching job design guided by a practice of increasing the work, setting goals, collection results, pointing to the intensification of teaching, so that it happens to be challenged by this type of managerial discourse. In this management model, professionals are taken to adjust to such logic, therefore, the state counts on the regulation, through monitoring, evaluation and annual financial incentive for professionals. The results of the analysis of the interviews showed that different discourses pervade the school space: there are agreements, disagreements and many uncertainties. It was possible to find teachers who agree with the current policy, who have found positives aspects in PMGP-ME, but can also observe their limits. In the discussion about how the program is effective in practice, it was possible to realize three things that take place in school practice: a) vertical practices both in actions and in decision-making; b) The regulation on school work and teaching work; and. c) Modifications, adaptations and difficulties in/of school context, resulting from the implementation of the program. The respondents reveal that the teaching conception of professional improvement runs through the construction of a professional career, professional and financial recognition, and training, among others. Still, the bonus is pointed out by many professionals as a financial incentive, but is not directly linked to professional improvement. Nonetheless, there are professionals who believe and bet on bonuses as professional improvement. In short, it was observed that: a) the program actualize managerial practices of a evaluator-state, which is premised on control of results; b) there are changes in the discourse of teachers involved in the program implementation as well as you can see the resistance to a modernization model that focuses on numbers.

Made available in DSpace on 2014-12-17T14:36:28Z (GMT). No. of bitstreams: 1 ShirmeniaKSNE_DISSERT.pdf: 1503801 bytes, checksum: 85c65eface4a3d85729738729d6db512 (MD5) Previous issue date: 2010-06-30 / This thesis entitled SINAES: the different faces of the evaluation at UFRN, aims to analyze the configuration that the national policy for assessment in higher education has taken on UFRN. We assume that in recent years there are an oscillation between the concepts of evaluation, according with the logic of public administration it has preferred an approach that presents itself as a promoter of quality, sometimes with regulatory aspects, sometimes with educational ones. The text discusses the use of the new assessment tools for higher education placing them under the new demands on state reform context in which this is to promote and measure quality based on the values of excellence and competitiveness. This movement arises from the redefinition of the role of the State that has been taking features of Evaluator State. From a historical review of government initiatives in the field of evaluation, we analyze the characteristics of assessment policies outlined over the past decades. We are based on the theoretical method that aims to examine the multiple determinants that shape a particular reality from the larger movement of totality. To identify, in this case, connections and ruptures that have emerged over the history of assessment policies aimed at higher education by checking their determinants in order to better explain the reality. To investigate the object of this study we used as instruments: the research literature and research documents, the semi-structured interviews and non-participant observation. The study revealed that there are different practices of evaluation and that before to establishment the SINAES program, the UFRN already had a culture of an institutional assessment, more participatory and democratic, opposing to the rigidity of the self-assessment in SINAES program that it was instituted by the Commission for assessment (CPA). We also noticed that the implementation of the SINAES at URFN has been performed very slowly and the breadth and complexity of the evaluation process has contributed to hinder its implementation in all dimensions provided by MEC. Although it was observed that in its operationalization the SINAES has assumed a more normative assessment and directed to establish rankings between courses and higher education schools than to establish a more qualitative assessment in this system. As regards the evaluation of the undergraduate course studied on this research and subjected to the three dimensions of evaluation proposed by SINAES (self-assessment, Evaluation of Courses and ENADE) it was not possible to verify an effective integration between the methods of assessing conducted. The results are considered separately, in only a partial view of the course evaluated the proposal what pits the SINAES as a system that involves the totality / O presente trabalho intitulado SINAES: as diferentes faces da avalia??o na UFRN tem como objetivo analisar a configura??o que a pol?tica nacional de avalia??o para o ensino superior vem assumindo na UFRN. Partimos do pressuposto de que, nos ?ltimos anos, tem havido uma oscila??o entre as concep??es de avalia??o que, na l?gica da gest?o p?blica, tem privilegiado uma perspectiva que se apresenta como promotora da qualidade, ora com aspectos Estado avaliador. Ensino superior. Pol?ticas de avalia??o reguladores, ora formativos. O texto discute o uso da edifica??o de novos instrumentos de avalia??o para o ensino superior situando-a no ?mbito das novas demandas contextuais na reforma do Estado em que este passa a promover e mensurar a qualidade com base nos valores da excel?ncia e da competitividade. Esse movimento decorre da redefini??o do papel do Estado, que vem assumindo fei??es de Estado avaliador. A partir de uma retrospectiva hist?rica das iniciativas do governo no campo da avalia??o, explicitamos as caracter?sticas das pol?ticas de avalia??o delineadas ao longo das ?ltimas d?cadas. Servimo-nos de um referencial te?ricometodol?gico que visa analisar as m?ltiplas determina??es que configuram uma determinada realidade a partir de um movimento maior de totalidade. Nesse sentido, s?o identificadas conex?es e rupturas que surgiram, ao longo da hist?ria das pol?ticas de avalia??o voltadas para o ensino superior verificando os seus determinantes, visando explicar melhor a realidade. Para investigarmos o objeto de estudo, utilizamos, como procedimentos metodol?gicos, a pesquisa bibliogr?fica e documental, as entrevistas semiestruturadas e a oberva??o n?o-participante. O estudo revelou haver, na institui??o, diferentes pr?ticas de avalia??o e que, antes da implanta??o do SINAES, j? havia uma cultura de avalia??o institucional, mais participativa e democr?tica que se contrap?e ? rigidez presente na autoavalia??o institu?da pelo SINAES e, seguida, pela Comiss?o Pr?pria de Avalia??o. Verificamos, tamb?m, que a implanta??o do SINAES, na URFN, vem sendo realizada de forma muito lenta e a amplitude e complexidade do processo avaliativo t?m contribuido para dificultar a sua implementa??o em todas as dimens?es previstas pelo MEC. Ainda foi poss?vel evidenciar que, em sua operacionaliza??o, o SINAES tem assumido uma postura de avalia??o muito mais normativa e voltada para o estabelecimento de rankings entre cursos e intitui??es do que em estabelecer uma avalia??o mais qualitativa do ensino. No que se refere ? avalia??o do Curso de gradua??o submetido ?s tr?s dimens?es de avalia??o propostas pelo SINAES (autoavalia??o, Avalia??o de Cursos e ENADE) n?o foi poss?vel verificar uma efetiva integra??o entre as modalidades de avalia??o realizadas. Os resultados s?o considerados isoladamente, em uma vis?o, apenas, parcial do curso avaliado o que descaracteriza a proposta do SINAES como um sistema de avalia??o global

Heuristic Evaluation (HE) is a popular method of usability inspection. However, its outcomes are dependent on the expertise of evaluators. This study explored and described the difference in quality of outcomes (reports) of a collaborative HE conducted by evaluator groups of distinct composition, regarding different numbers of expert evaluators in each group. Twenty-seven (27) evaluators voluntarily contributed with this study, nine (9) expert and 18 novice evaluators. Thus, I organized seven (7) HE groups according to four (4) different levels of the factor presence of an expert, which ranged from no expert up to three (3) experts in the same group. Each group agreed to provide their reports for this study. Thereafter, I conducted a comparative analysis on the reports based on standard methods of the field and on a cluster analysis of similarities. I described the F-measure for each group report according to a relaxed and a strict criteria. Also, I described the dendrograms formed from the cluster analysis and the respective similarities indicated by each cluster. The results showed that the quality of reports from collaborative HE conducted by experts and novices together can be more similar to the quality of reports from a traditional HE with multiple expert inspectors (Benchmark Group) then to the quality of reports from a collaborative HE conducted by a group composed only by novice evaluators (Baseline Group). Finally, I discuss additional findings and implications for future studies in the field. / A Avaliação Heurística (AH) é um método popular de inspeção de usabilidade. Entretanto, seus resultados são dependentes da experiência dos avaliadores. Este estudo explorou e descreveu a diferença na qualidade de resultados (relatórios) de AH colaborativa conduzida por grupos de avaliadores de composição distinta, considerando diferentes quantidades de avaliadores experientes em cada grupo. Vinte e sete (27) avaliadores contribuíram voluntariamente com este estudo, nove (9) experientes e 18 novatos. Assim, foram organizados sete (7) grupos de AH, de acordo com quatro (4) níveis diferentes do fator presença de avaliador experiente, variando de nenhum experiente até três (3) avaliadores experientes no mesmo grupo. Cada grupo de avaliadores concordou em entregar seus relatórios de AH para este estudo. A partir de tais relatórios, foi conduzida uma análise comparativa baseada em métodos específicos da área, e também baseado em uma análise de agrupamento com base em medidas de similaridade. Como resultado, descreveu-se as medidas F (F-measure) referentes ao relatório de cada grupo respeitando critérios estritos e relaxados de comparação. Além disto, foram descritos os dendrogramas resultados das análises de agrupamento. Os resultados mostraram que a qualidade de relatórios de AH colaborativas conduzidas por avaliadores experientes e novatos juntos pode ser mais similar à qualidade de relatórios de AH tradicional conduzida por múltiplos avaliadores experientes (Grupo Benchmark) do que à qualidade de relatórios de AH colaborativa conduzida por grupos formados apenas por avaliadores novatos (Grupo Baseline). Finalmente, discutiu-se resultados adicionais e implicações para pesquisas futuras na área.

This doctoral thesis titled "Evaluation Policies in Brazilian Postgraduate Education: A Hermeneutics of Teaching Work" was developed in the Program of Postgraduate Education (PPGE) of the Federal University of Santa Maria (UFSM), in the research line; Training, Knowledge and Professional Development. This work has as main objective an analysis of possible changes provided by evaluative construction of Brazilian graduate education in teacher training and production of knowledge, through a hermeneutic look. Relations and directions of the formative process of research by academic research were analyzed, as well as scientific production and productivity as a regulatory feature of the Evaluator State. To this end, we seek an empirical basis, the contextualization of these indexes evaluation and trends. Therefore, documents and spreadsheets were analyzed issued by the Education area in the last two periods of CAPES evaluation (2007-2009; 2010-2012) as also the National Postgraduate Plan (2010-2020). From this evaluation context the text proposes the following question: To what extent the instrumental policy evaluation results of the Brazilian Postgraduate CAPES has influence in teacher formation and productivity of academic research in the Brazilian Education? So the topic discussed in this paper's main theoretical has references the theories of Jürgen Habermas, from his books, Truth and Justification, Science and Technology as Ideology and your article University Idea: learning processes. The reification of the subject, the exposure of Axel Honneth is crafted mainly from his book Reificación: one studio en la theory of reconocimiento and the article complementary to this study entitled Observations on the reification. The production of knowledge in the academy is articulated by the State, as a powerful tool for economic development. We observe this phenomenon when the formation of teachers in the research (the subject) manifests instrumentally as an entrepreneur agent (object), giving up of their social essence and self-awareness. The positioning and argumentation of researchers in education, regardless of its strong foundation, not raises awareness and effectively penetrates the political tissue with sufficient strength and as a determining factor to change this state of affairs, through effective action emancipatory education. Criticism of the system of evaluation performed by this work suggests a paradigm shift in the pursuit of equity between science and the humanities and the readjustment of the look evaluative in relation to production rates. This concept is presented from a collaborative vision of formation, construction and evaluation of academic knowledge and your producers. / A presente tese de doutorado com o título Políticas Avaliativas da Pós-Graduação em Educação Brasileira: Uma Hermenêutica do Trabalho Docente foi desenvolvida no Programa de Pós-graduação em Educação (PPGE) da Universidade Federal de Santa Maria (UFSM), na Linha de Pesquisa Formação, Saberes e Desenvolvimento Profissional. O trabalho tem como objetivo principal uma análise das possíveis transformações proporcionadas pela construção avaliativa da pós-graduação brasileira em educação na formação docente e produção do conhecimento, através de um olhar hermenêutico. As relações e rumos do processo formativo do pesquisador através da pesquisa acadêmica foram analisados, assim como a produção científica e produtividade como uma característica regulatória do Estado-avaliador. Para tanto, busca-se como base empírica, a contextualização desses índices de avaliação e suas tendências. Portanto, foram analisados os documentos e planilhas emitidos pela área de Educação nos últimos dois triênios de avaliação CAPES (2007-2009; 2010-2012) bem como o Plano Nacional de Pós Graduação (2010-2020). A partir deste contexto avaliativo o texto propõe o seguinte questionamento: Em que medida a política instrumental de avaliação de resultados da pós-graduação brasileira pela CAPES interfere na formação docente e na produtividade da pesquisa acadêmica no Brasil em Educação? Por isso o tema discutido neste trabalho tem como referências teóricas principais as teorias de Jürgen Habermas, a partir de seus livros Verdade e Justificação, Ciência e Técnica como Ideologia e o artigo A Ideia de Universidade: processos de aprendizagem. No tema da reificação, a exposição de Axel Honneth é trabalhada principalmente a partir seu livro Reificación: um estudio en la teoría de reconocimiento e o artigo complementar a este estudo intitulado Observações sobre a reificação. A produção do conhecimento na academia é articulada pelo Estado, como uma poderosa ferramenta para o desenvolvimento econômico do país. Observa-se esse fenômeno quando a formação do docente na pesquisa (sujeito) se manifesta instrumentalmente como um agente empreendedor (objeto), abrindo mão de sua essência social e sua autoconsciência. O posicionamento e a argumentação dos pesquisadores em educação, independentemente de seu forte embasamento, não sensibiliza e penetra efetivamente o tecido político com força suficiente e como fator determinante para modificar esse estado de coisas, através de uma ação efetiva de formação emancipatória. A crítica ao sistema de avaliação realizada por este trabalho sugere uma mudança de paradigma na busca da equidade entre ciência e humanidades e a readequação do olhar avaliativo em relação aos índices de produção. Esta concepção é apresentada a partir de uma visão colaborativa de formação, construção e avaliação do conhecimento acadêmico e seus produtores.

Heuristic Evaluation (HE) is a popular method of usability inspection. However, its outcomes are dependent on the expertise of evaluators. This study explored and described the difference in quality of outcomes (reports) of a collaborative HE conducted by evaluator groups of distinct composition, regarding different numbers of expert evaluators in each group. Twenty-seven (27) evaluators voluntarily contributed with this study, nine (9) expert and 18 novice evaluators. Thus, I organized seven (7) HE groups according to four (4) different levels of the factor presence of an expert, which ranged from no expert up to three (3) experts in the same group. Each group agreed to provide their reports for this study. Thereafter, I conducted a comparative analysis on the reports based on standard methods of the field and on a cluster analysis of similarities. I described the F-measure for each group report according to a relaxed and a strict criteria. Also, I described the dendrograms formed from the cluster analysis and the respective similarities indicated by each cluster. The results showed that the quality of reports from collaborative HE conducted by experts and novices together can be more similar to the quality of reports from a traditional HE with multiple expert inspectors (Benchmark Group) then to the quality of reports from a collaborative HE conducted by a group composed only by novice evaluators (Baseline Group). Finally, I discuss additional findings and implications for future studies in the field. / A Avaliação Heurística (AH) é um método popular de inspeção de usabilidade. Entretanto, seus resultados são dependentes da experiência dos avaliadores. Este estudo explorou e descreveu a diferença na qualidade de resultados (relatórios) de AH colaborativa conduzida por grupos de avaliadores de composição distinta, considerando diferentes quantidades de avaliadores experientes em cada grupo. Vinte e sete (27) avaliadores contribuíram voluntariamente com este estudo, nove (9) experientes e 18 novatos. Assim, foram organizados sete (7) grupos de AH, de acordo com quatro (4) níveis diferentes do fator presença de avaliador experiente, variando de nenhum experiente até três (3) avaliadores experientes no mesmo grupo. Cada grupo de avaliadores concordou em entregar seus relatórios de AH para este estudo. A partir de tais relatórios, foi conduzida uma análise comparativa baseada em métodos específicos da área, e também baseado em uma análise de agrupamento com base em medidas de similaridade. Como resultado, descreveu-se as medidas F (F-measure) referentes ao relatório de cada grupo respeitando critérios estritos e relaxados de comparação. Além disto, foram descritos os dendrogramas resultados das análises de agrupamento. Os resultados mostraram que a qualidade de relatórios de AH colaborativas conduzidas por avaliadores experientes e novatos juntos pode ser mais similar à qualidade de relatórios de AH tradicional conduzida por múltiplos avaliadores experientes (Grupo Benchmark) do que à qualidade de relatórios de AH colaborativa conduzida por grupos formados apenas por avaliadores novatos (Grupo Baseline). Finalmente, discutiu-se resultados adicionais e implicações para pesquisas futuras na área.

nÃo hà / iversas iniciativas de avaliaÃÃo externa em larga escala surgiram no Brasil durante a dÃcada de 1990, a destacar: Sistema Nacional da AvaliaÃÃo BÃsica (SAEB) e Exame Nacional do Ensino MÃdio (ENEM). Passados mais de vinte anos, desde o nascimento dessas iniciativas, intensificaram-se as discussÃes em torno da prÃpria avaliaÃÃo escolar interna realizada pelos professores. Aproximar a avaliaÃÃo externa em larga escala da avaliaÃÃo interna escolar coloca-se como um problema da atualidade no cenÃrio educacional brasileiro. Nesse contexto, delimitamos o objeto desta pesquisa: o professor-avaliador. Definimos como objetivo geral deste trabalho discutir a identidade deontolÃgica do professor-avaliador. Os objetivos especÃficos que orientaram este trabalho foram assim planificados: (1) discutir a identidade deontolÃgica do professor-avaliador no contexto do paradigma docimolÃgico da avaliaÃÃo escolar, (2) discutir a identidade deontolÃgica do professor-avaliador no contexto do paradigma pedagÃgico da avaliaÃÃo escolar, (3) identificar o referencial de competÃncias imputado ao professor-avaliador do programa Aprender pra Valer SEDUC-CE. Esta pesquisa se inscreve na abordagem qualitativa por manifestar, entre outras caracterÃsticas, o carÃter descritivo e interpretativo, o interesse pela utilizaÃÃo dos resultados, a busca por diversas fontes de dados. Os procedimentos metodolÃgicos consubstanciaram-se em anÃlise documental e pesquisa bibliogrÃfica. Os dados foram interpretados pela anÃlise de conteÃdo. Para efeito deste estudo, como referenciais teÃricos, demarcamos Bloom, Hastings e Madaus (1983), Perrenoud (1999), Afonso (2000), Hadji (1994, 2001), Tyler (1949), Bonniol e Vial (2001). Os resultados da pesquisa indicaram que a avaliaÃÃo externa em larga escala exerce influÃncia sobre identidade deontolÃgica do professor-avaliador ao propor um referencial para a construÃÃo de instrumentos de avaliaÃÃo: a Matriz de ReferÃncia. O Programa Aprender Pra Valer indica a avaliaÃÃo externa em larga escala como principal agente da gestÃo do sistema, da gestÃo da escola e da gestÃo da sala de aula. No entanto, esse programa nÃo apresenta um projeto especÃfico para a formaÃÃo do professor-avaliador nem confirma a importÃncia da avaliaÃÃo escolar interna. O paradigma docimolÃgico nos permite identificar os deveres do professor-avaliador na perspectiva dos instrumentos de avaliaÃÃo, enquanto a formaÃÃo do professor-avaliador, baseada no paradigma pedagÃgico, situa a formaÃÃo dele em um quadro complexo da abordagem sistÃmica anunciada inicialmente por Tyler (1977) e confirmada por Bloom, Hastings e Madaus (1983), Perrenoud (1999, 2000, 2002) e Hadji (1994, 2001). / Various initiatives to external large-scale evaluation arise in Brazil during the 1990s, especially: National System of Basic Assessment (SAEB) and National Secondary Education Examination (ENEM). After more than twenty years since the birth of those initiatives, discussions about the schools own internal assessment by teachers have been intensified. Bringing near the outer large-scale evaluation to the schoolâs internal evaluation arises as a problem today in the Brazilian educational scenario. In this context, we have delimited the object of this research: the evaluator-teacher. We have defined as general objective of this research the discussion on the ethical identity of evaluator-teacher. The specific objectives that guided this study were planned as follows: (1) to discuss the ethical identity of evaluator-teacher in the context of the paradigm docimolÃgico school evaluation, (2) to discuss the ethical identity of evaluator-teacher in the context of the pedagogical paradigm of school evaluation, (3) to identify the reference of powers attributed to the evaluator-teacher on Aprender pra Valer (Learning for Sure) program, by SEDUC-CE. This research falls under the qualitative approach by stating â among other features â the descriptive and interpretative matter, the interest on the use of the results, use various data sources. The methodological procedures substantiated in documentary analysis and literature review. The data were interpreted by content analysis. For purposes on this study we defined as theoretical references Bloom, Hastings and Madaus (1983), Perrenoud (1999), Afonso (2000), Hadji (1994.2001), Tyler (1949), Bonniol and Vial (2001). The survey results indicated that external evaluation on a large scale will influence on ethical identity of evaluator-teacher by proposing a framework for the construction of assessment instruments: the Reference Matrix. The Learning For Sure Program (Aprender Pra Valer) indicates the external evaluation on a large scale as the main agent of the management system, school management and the management of the classroom. However, this program does not have a specific project for the evaluator-teacherâs education evaluator and to confirm the importance of internal school evaluation. The docimologic paradigm allows us to identify the duties of the evaluator-teacher from the perspective of evaluation instruments. While the formation of the evaluator-teacher, based on educational paradigm, lies in their education in a complex frame of the systemic approach initially announced by Tyler (1977) and confirmed by Bloom, Hastings and Madaus (1983), Perrenoud (1999, 2000, 2002) and Hadji (1994.2001).

Submitted by Joel de Lima Pereira Castro Junior (joelpcastro@uol.com.br) on 2016-07-08T20:23:41Z No. of bitstreams: 1 MileneCampos.pdf: 1717610 bytes, checksum: 11197fafabd47113c612dfe1ebaa5370 (MD5) / Approved for entry into archive by Biblioteca de Administração e Ciências Contábeis (bac@ndc.uff.br) on 2016-07-18T19:50:30Z (GMT) No. of bitstreams: 1 MileneCampos.pdf: 1717610 bytes, checksum: 11197fafabd47113c612dfe1ebaa5370 (MD5) / Made available in DSpace on 2016-07-18T19:50:30Z (GMT). No. of bitstreams: 1 MileneCampos.pdf: 1717610 bytes, checksum: 11197fafabd47113c612dfe1ebaa5370 (MD5) / Coordenação de Aperfeiçoamento de Pessoal de Nível Superior / Universidade Federal Fluminense / A qualidade no processo educacional é objeto de busca do nosso país há muitos anos. Vários projetos e medidas governamentais foram inseridos e discutidos nas últimas décadas em vários níveis e nas inúmeras redes de ensino que compõem o Brasil. No entanto, uma das variáveis que compõe o processo de ensino dentro das unidades escolares vem ganhando destaque como elemento chave para o alcance desta qualidade na educação, sendo esta a Gestão Escolar. Neste trabalho foi desenvolvida uma análise de como o processo administrativo, encontra-se definido pelos autores especialistas, para o alcance do sucesso de suas Organizações e/ou Instituições e as implicações que este pode provocar de acordo com o modo que é desenvolvido e trabalhado dentro das Instituições. Esta pesquisa concentrou-se em duas escolas estaduais situadas no município de Niterói/RJ e para sua efetivação foi realizado um estudo de caso destas duas escolas com o objetivo de se investigar como seus processos de gestão acontecem e como este influencia na qualidade da educação, usando como parâmetro o avaliador externo- IDEB. Após estas análises foi realizado um comparativo entre as duas escolas, através das médias auferidas pelos questionários sobre várias linhas de investigação referentes ao processo administrativo desenvolvido na escola, além da percepção registrada no diário de campo do pesquisador de suas visitas e das entrevistas realizadas com alguns membros do corpo diretivo. Sendo então apontadas características que ocorrem durante o processo administrativo que podem estar influenciando no alcance das metas estabelecidas pelo IDEB. / The quality of the educational process is the object of pursuit of our country for many years. Several projects and government measures were entered and discussed in recent decades at various levels and in numerous school systems that make up Brazil. However, one of the variables that make up the teaching process within the school units is gaining prominence as a key element to achieve this quality in education, which is the School Management. In this work we developed an analysis of how this administrative process is defined by the authors experts, to achieve the success of their Organizations and /or Institutions and the implications that this may cause in accordance with how it is developed and worked within the Institutions. This research focused on two elementary schools located in Niterói/RJ and its implementation was carried out a case study of two schools with the aim of investigating how their management processes happen and how this influences the quality of education, using as parameter the external evaluator- IDEB. After these analyzes we performed a comparison between the two schools, as means of questionnaires received by several lines of inquiry relating to administrative procedure developed in school, beyond perception recorded in the researcher's field diary of his visits and interviews with some members of the governing body. Since then pointed out features occurring during the administrative procedure that may be influencing the achievement of targets set by IDEB.

Introdução: Feedback é uma ferramenta de ensino poderosa. Para otimizar o feedback em avaliações tipo OSCE (Objective Structured Clinical Examination), uma modificação no papel do avaliador, apelidada de \"avaliador sombra\", foi testada. Os \"avaliadores sombras\" acompanham os estudantes por todas as estações realizando todas as avaliações. Ao término da atividade, realizam feedback do desempenho clínico aos estudantes. Objetivos: Descrever e discutir a experiência na aplicação deste modelo OSCE modificado, avaliar as opiniões dos alunos em relação a este novo método, e apresentar um estudo onde foram realizadas comparações entre o \"avaliador sombra\" e o formato original do examinador OSCE, nomeado de \"avaliador fixo\", com o objetivo de responder se este novo formato de avaliação apresenta vieses em relação ao formato original. Metodologia: Em 2011 foram realizados experimentos com as modificações no papel do avaliador para definir o formato final do \"avaliador sombra\". No período compreendido de fevereiro de 2012 a maio de 2014 foi realizado um protocolo de pesquisa com 415 estudantes do 6º ano de medicina. Destes, 316 estudantes foram randomizados para serem avaliados por avaliadores \"sombras\" e \"fixos\". Para analisar as comparações entre os avaliadores \"sombras\" e \"fixos\", foram utilizados o coeficiente de correlação de Pearson com regressão linear, teste t de Student e gráficos de Bland-Altman. Para aprofundar estas análises, os itens dos checklists foram classificados por domínios para realização de comparações mais específicas. Considerando que esta foi a primeira vez em que esta nova estratégia de avaliador (\"sombra\") foi aplicada, foram realizados questionários de opinião aos 415 estudantes que participaram do OSCE com o \"avaliador sombra\". Resultados: Foram encontradas altas e significativas correlações entre as notas globais por estação dadas aos estudantes pelos avaliadores \"sombras\" e \"fixos\",r = 0,87 (0,85 - 0,89; p < 0,05). Nas análises por domínios (afetivo, psicomotor e cognitivo), os resultados demonstraram maiores correlações entre as notas no domínio cognitivo e menores no afetivo. Não houve diferenças significativas comparando as médias das notas dadas pelos examinadores em relação às notas globais e nos domínios psicomotor e cognitivo. Análises de Teste t e de Bland-Altman demonstraram que as notas dadas aos estudantes no domínio afetivo foram maiores pelos \"avaliadores sombras\", mas a magnitude desta diferença foi muito pequena. De acordo com os questionários aplicados aos 415 estudantes, o feedback realizado pelos \"avaliadores sombras\" contribui para o aprimoramento de habilidades. Mais do que 90% dos estudantes concordaram que o feedback realizado pelo \"avaliador sombra\" é mais efetivo do que outras estratégias de feedback realizadas em outras aplicações de OSCE durante o curso de graduação de medicina até aquele momento. Conclusão: As modificações no papel do avaliador, \"avaliador sombra\", não levaram a vieses significativos nas notas dos estudantes quando comparado ao modelo de avaliador original do OSCE. Esta nova estratégia pode fornecer importantes melhorias na avaliação formativa de competências clínicas / Background: Feedback is a powerful learning tool. To improve the opportunity for feedback provided during an Objective Structured Clinical Examination (OSCE), a modification of the examiner\'s role nicknamed the \"shadow examiner\" was tested. In this new strategy, examiners follow the students across all OSCE stations, and may provide important insights for formative assessments of clinical performance Objective: Describe and discuss the experience in applying this modified OSCE, evaluate students\' opinions regarding this new method, and present an experience to analyze comparisons between the \"shadow examiner\" and original examiner OSCE format, nicknamed \"fixed examiner\". The objective of this study was to answer if this new assessment format presents biases in relation to the original format. Methods: In 2011, some experiments were carried out with modifications in the examiner\'s role to define the format of \"shadow examiner\". From February 2012 to May 2014, the research protocol was performed with 415 6th year medical students. Of these, 316 were randomly assigned to assessments made up of \"shadow\" and \"fixed\" examiners. Pearson correlation coefficients with linear regression, Student\'s t-test analysis, Bland-Altman plots were the statistical methods used to compare the assessment modes. To strengthen the analysis, checklist items were classified by domains in order to make specific comparisons. Considering that this was the first application of this new examiner (\"shadow\") strategy was applied, were conducted opinion surveys of the 415 students who participated in the OSCE with the \"shadow examiner\". Results: High correlations for global scores between \"shadow\" and \"fixed\" examiners were observed, r = 0,87 (0,85 - 0,89; p < 0,05). Analysing specific domains (affective, psychomotor and cognitive), the results demonstrated higher correlations for cognitive scores and lower correlations for affective scores. No statistically significant differences between mean examiners\' global scores, psychomotor and cognitive domains were found. T-test and Bland-Altman reviews showed that affective scores from \"shadow examiners\" were significantly higher than those from \"fixed examiners\", but the magnitude of this difference was small. According to the questionnaires applied to the 415 students, feedback from \"shadow examiners\" contributes to skills training, and more than 90% of these students agree that feedback from \"shadow examiners\" is more effective than other feedback formats achieved in other OSCE applications during the medical graduation course up to that time. Conclusion: The modifications in the role of examiner, \"shadow examiner\", did not lead to any important bias in the students\' scores comparing with the original examiner strategy of OSCE. This new strategy may provide important insights for formative assessments of clinical performance