A proficiência e o fluxo de estudantes são desafios importantes a serem enfrentados pelos vários níveis de ensino no Brasil, em especial no ensino médio. Cientes desse desafio, setor público e sociedade civil têm buscado melhorar esses indicadores por meio de alguns programas. O programa Jovem de Futuro é uma dessas iniciativas. Direcionado às escolas públicas de ensino médio, o programa objetiva melhorar a proficiência e fluxo dos alunos por meio de um conjunto de ações focadas em capacitação para a gestão e auxílio financeiro para as escolas. Com o objetivo de verificar o impacto sobre esses resultados, as escolas participantes foram selecionadas por meio de um sorteio aleatório. O presente trabalho realizou análises de impacto desse programa em diferentes dimensões. As estimativas encontradas indicam que o programa teve impacto sobre as notas dos estudantes em quatro das cinco regiões participantes. Quando estatisticamente significante, esse impacto foi de no mínimo 0, 158? para língua portuguesa e 0, 176? em matemática. Com a intenção de entender se os impactos foram diferenciados para determinados grupos de estudantes e escolas, foram também realizadas análises de heterogeneidade. Os resultados apontaram que o programa não teve efeitos diferenciados para os perfis de estudantes analisados. Por outro lado, quando os perfis de escolas são analisados, as estimativas apontam que os estudantes de escolas com melhores indicadores no período pré-tratamento podem ter sido mais beneficiados. O trabalho também realizou a análise de impacto para a probabilidade de evasão e reprovação dos estudantes tratados. Os resultados apontaram que o tratamento diminuiu as chances de evasão e reprovação em regiões onde o programa estabeleceu metas para esses fatores. Finalmente, diante das diferentes direções de impacto sobre notas e fluxo, realizou-se também uma análise de impacto sobre o IDEB. As análises indicaram que em locais onde a piora do fluxo foi relevante os resultados no IDEB não avançaram da mesma maneira do que nas notas dos estudantes. / Low tests scores and low graduation rates are examples of educational challenges in Brazil, especially if we refer to secondary students. Public policies have been created to improve these indices and the \"Jovem de Futuro\" program is one example. We analyzed details of this program to understand if and how it works. \"Jovem de Futuro\" has been a program focused on support for public secondary schools. It provides training for principals and teachers to improve school management and funding for schools. In addition, a randomized controlled trial was designed for selection of treated schools, which ensured our ability to perform a causality analysis. Our results indicate that the program improves student performance in language (Portuguese) and mathematics tests. The scores of treated students increased about 0.2?. Furthermore, we did not find any difference in the performance of students when we grouped them, for example, by sex or race. Our analysis also indicates that students perform better if they are from schools with better previous results. Because repetition and dropout rates are a real problem in schools of secondary level in Brazil, we estimated how effective the program was at changing these rates. Our results indicate repetition and dropout probabilities fell if students are from schools that received goals to improve these rates. On the other hand, if schools did not receive any goal, dropout and repetition probability from students in treated schools increased. Finally, because of these mix effects - better test performance and worse repetition and dropout rates - we calculated and estimated the impact in the Index of Development of Basic Education (IDEB). This index put together: performance in tests and rates of students approved. Our results show that the impact on this index was lower than in the student tests performance in schools from areas with lower approbation rates.

Os pressupostos da teoria de avaliação de programas orientada ao consumidor estabelecem que o avaliador tem que identificar os resultados dos programas e seus valores sob a perspectiva das necessidades dos usuários. A avaliação deve ajudar os usuários a escolher entre programas concorrentes por meio de informações. Tendo por base esse arcabouço teórico, o objetivo geral desta pesquisa foi analisar as variáveis de avaliação de programas de especialização prevalecentes segundo a visão de especialistas que são aderentes aos modelos de decisão e de avaliação dos participantes. Concluiu-se que as melhores práticas de avaliação educacional sobre qualidade atendem às necessidades dos alunos no processo de decisão por programa de especialização para executivos a cursar e na avaliação dos programas em curso no contexto brasileiro. Essa constatação foi possível por meio do estudo das hipóteses da pesquisa, com a análise dos resultados da técnica Delphi, entrevistas e aplicação de questionários. Os constructos identificados na teoria de avaliação educacional e levantados na aplicação da técnica Delphi são internos (Corpo Docente, Qualidade das Disciplinas, Perfil da Turma, Infra-Estrutura, Biblioteca, Estudos de Casos, Gestão do Programa, Forma de Ingresso e Monografia) e externos (Reputação, Mercado de Trabalho, Análise de Valor, Classificação em Rankings, Satisfação do Empregador, Internacionalização e Custo). Especialistas, administradores de programas e professores criticam os rankings de melhores instituições de ensino, mas admitem que ainda dão visibilidade e credibilidade ao programa na percepção de alunos e empregadores. O desenvolvimento, a aplicação, os objetivos e os benefícios da avaliação educacional não são completamente compreendidos pelos interessados em programas de especialização. Esse fato é justificado pela carência de recursos no país para a formação específica na área e pouca produção científica sobre o assunto. O grande número de programas de especialização para executivos foi considerado prejudicial à qualidade percebida pelos empregadores e alunos, e causador da confusão entre programas lato e stricto sensus. Administradores de programas, professores, alunos, empregadores e especialistas atribuíram importância elevada aos constructos Reputação, Corpo Docente e Qualidade das Disciplinas. Para a avaliação educacional, o Custo foi considerado o de menor importância por especialistas, administradores de programas, professores e alunos. Entretanto, o mesmo constructo teve importância significativa para alunos no momento de escolha por um programa de especialização a cursar. Os constructos Monografia e Forma de Ingresso foram considerados de pouca importância pelos respondentes tanto para a avaliação educacional quanto para o modelo de decisão por programa de especialização a cursar. A hipótese de que os professores percebem mais valor nos constructos internos do que os alunos, administradores de programas e empregadores não foi aceita como verdadeira. A segunda hipótese, que sugeriu que especialistas percebem mais valor nos constructos internos do que alunos, administradores de programas e empregadores não foi aceita como verdadeira. A terceira hipótese sugeriu que os alunos percebem mais valor nos constructos externos do que professores, administradores de programas e especialistas. Constatou-se que os alunos percebem mais valor ao Mercado de Trabalho, Classificação em Rankings, Custo e Reputação para avaliação educacional do que os professores. A quarta hipótese sugeriu que os empregadores percebem mais valor nos constructos externos do que especialistas e professores, mas nenhuma diferença significativa foi apontada pelos testes. A quinta hipótese (alunos ingressantes percebem mais valor nos constructos externos do que nos internos para o modelo de decisão por programa de especialização a cursar) e a sexta (alunos percebem mais valor nos constructos internos do que nos externos para a avaliação educacional) não foram aceitas, pois nenhuma diferença significativa foi identificada entre as médias dos constructos. / The assumptions pertaining to consumer oriented program evaluation theory establish that the evaluator must identify the programs results and their values under the perspective of users necessities. The evaluation must help users choose between competitor programs with information. Based on this theoretical framework, this research aimed at analyzing specialization program evaluations variables that prevail under the specialists points of view that are sticking to the participants models of decision and of evaluation. The conclusion is that the best practices of quality education evaluation attend the students necessities to choose one executive specialization program to follow and to performance program evaluation in Brazils context. This conclusion was possible with the study of researchs suppositions, with the analysis of Delphis results, interviews and questionnaires. The elements identified by education evaluation theory and raised with Delphi are internal (Teaching Staff, Quality of Disciplines, Students Profile, Infrastructure, Library, Case Studies, Programs Management, Selection of Students and Monograph) and external (Reputation, Labor Market, Value Analysis, Classification in Rankings, Employers Satisfaction, Internationalization and Cost). Specialists, programs managers and teachers criticize the best schools rankings, but they admit that rankings give visibility and credibility to the program under the perceptions of students and employers. The development, the application, the objectives and the benefits of education evaluation are not completely understood by the specialization programs users. This fact is justified by the lack of resources in Brazil addressed to education research on evaluation and lack of scientific production. The great number of existing executive specialization programs was considered harmful to the quality perceived by employers and students, and responsible for the confusion between lato and stricto sensu programs. Programs managers, teachers, students, employers and specialists attributed high importance to Reputation, Teaching Staff and Quality of Disciplines. For the education evaluation, Cost received the smallest importance from specialists, programs managers, teachers and students. However, Cost had significant importance to students at the moment of choosing a specialization program to follow. Monograph and Selection of Students were considered little important to both education evaluation and to the decision model used to choose a specialization program to follow. The supposition that suggested that teachers attribute more value to internal elements than students, programs managers and employers was not accepted. The second supposition, that suggested that specialists attribute more value to internal elements than students, programs managers and employers was not accepted. The third supposition suggested that students attribute more value to external elements than teachers, programs managers and specialists. It was proved that students attribute more value to Labor Market, Classification in Rankings, Cost and Reputation than teachers to education evaluation. The fourth supposition suggested that employers attribute more value to external elements than specialists and teachers, but it was no found significant difference during the tests. The fifth supposition (new students attribute more value to external elements than to internal elements to the decision model used to choose a specialization program to follow) and the sixth supposition (students attribute more value to internal elements than to external elements to education evaluation) were not accepted, because it was not found significant difference between elements means.

Os pressupostos da teoria de avaliação de programas orientada ao consumidor estabelecem que o avaliador tem que identificar os resultados dos programas e seus valores sob a perspectiva das necessidades dos usuários. A avaliação deve ajudar os usuários a escolher entre programas concorrentes por meio de informações. Tendo por base esse arcabouço teórico, o objetivo geral desta pesquisa foi analisar as variáveis de avaliação de programas de especialização prevalecentes segundo a visão de especialistas que são aderentes aos modelos de decisão e de avaliação dos participantes. Concluiu-se que as melhores práticas de avaliação educacional sobre qualidade atendem às necessidades dos alunos no processo de decisão por programa de especialização para executivos a cursar e na avaliação dos programas em curso no contexto brasileiro. Essa constatação foi possível por meio do estudo das hipóteses da pesquisa, com a análise dos resultados da técnica Delphi, entrevistas e aplicação de questionários. Os constructos identificados na teoria de avaliação educacional e levantados na aplicação da técnica Delphi são internos (Corpo Docente, Qualidade das Disciplinas, Perfil da Turma, Infra-Estrutura, Biblioteca, Estudos de Casos, Gestão do Programa, Forma de Ingresso e Monografia) e externos (Reputação, Mercado de Trabalho, Análise de Valor, Classificação em Rankings, Satisfação do Empregador, Internacionalização e Custo). Especialistas, administradores de programas e professores criticam os rankings de melhores instituições de ensino, mas admitem que ainda dão visibilidade e credibilidade ao programa na percepção de alunos e empregadores. O desenvolvimento, a aplicação, os objetivos e os benefícios da avaliação educacional não são completamente compreendidos pelos interessados em programas de especialização. Esse fato é justificado pela carência de recursos no país para a formação específica na área e pouca produção científica sobre o assunto. O grande número de programas de especialização para executivos foi considerado prejudicial à qualidade percebida pelos empregadores e alunos, e causador da confusão entre programas lato e stricto sensus. Administradores de programas, professores, alunos, empregadores e especialistas atribuíram importância elevada aos constructos Reputação, Corpo Docente e Qualidade das Disciplinas. Para a avaliação educacional, o Custo foi considerado o de menor importância por especialistas, administradores de programas, professores e alunos. Entretanto, o mesmo constructo teve importância significativa para alunos no momento de escolha por um programa de especialização a cursar. Os constructos Monografia e Forma de Ingresso foram considerados de pouca importância pelos respondentes tanto para a avaliação educacional quanto para o modelo de decisão por programa de especialização a cursar. A hipótese de que os professores percebem mais valor nos constructos internos do que os alunos, administradores de programas e empregadores não foi aceita como verdadeira. A segunda hipótese, que sugeriu que especialistas percebem mais valor nos constructos internos do que alunos, administradores de programas e empregadores não foi aceita como verdadeira. A terceira hipótese sugeriu que os alunos percebem mais valor nos constructos externos do que professores, administradores de programas e especialistas. Constatou-se que os alunos percebem mais valor ao Mercado de Trabalho, Classificação em Rankings, Custo e Reputação para avaliação educacional do que os professores. A quarta hipótese sugeriu que os empregadores percebem mais valor nos constructos externos do que especialistas e professores, mas nenhuma diferença significativa foi apontada pelos testes. A quinta hipótese (alunos ingressantes percebem mais valor nos constructos externos do que nos internos para o modelo de decisão por programa de especialização a cursar) e a sexta (alunos percebem mais valor nos constructos internos do que nos externos para a avaliação educacional) não foram aceitas, pois nenhuma diferença significativa foi identificada entre as médias dos constructos. / The assumptions pertaining to consumer oriented program evaluation theory establish that the evaluator must identify the programs results and their values under the perspective of users necessities. The evaluation must help users choose between competitor programs with information. Based on this theoretical framework, this research aimed at analyzing specialization program evaluations variables that prevail under the specialists points of view that are sticking to the participants models of decision and of evaluation. The conclusion is that the best practices of quality education evaluation attend the students necessities to choose one executive specialization program to follow and to performance program evaluation in Brazils context. This conclusion was possible with the study of researchs suppositions, with the analysis of Delphis results, interviews and questionnaires. The elements identified by education evaluation theory and raised with Delphi are internal (Teaching Staff, Quality of Disciplines, Students Profile, Infrastructure, Library, Case Studies, Programs Management, Selection of Students and Monograph) and external (Reputation, Labor Market, Value Analysis, Classification in Rankings, Employers Satisfaction, Internationalization and Cost). Specialists, programs managers and teachers criticize the best schools rankings, but they admit that rankings give visibility and credibility to the program under the perceptions of students and employers. The development, the application, the objectives and the benefits of education evaluation are not completely understood by the specialization programs users. This fact is justified by the lack of resources in Brazil addressed to education research on evaluation and lack of scientific production. The great number of existing executive specialization programs was considered harmful to the quality perceived by employers and students, and responsible for the confusion between lato and stricto sensu programs. Programs managers, teachers, students, employers and specialists attributed high importance to Reputation, Teaching Staff and Quality of Disciplines. For the education evaluation, Cost received the smallest importance from specialists, programs managers, teachers and students. However, Cost had significant importance to students at the moment of choosing a specialization program to follow. Monograph and Selection of Students were considered little important to both education evaluation and to the decision model used to choose a specialization program to follow. The supposition that suggested that teachers attribute more value to internal elements than students, programs managers and employers was not accepted. The second supposition, that suggested that specialists attribute more value to internal elements than students, programs managers and employers was not accepted. The third supposition suggested that students attribute more value to external elements than teachers, programs managers and specialists. It was proved that students attribute more value to Labor Market, Classification in Rankings, Cost and Reputation than teachers to education evaluation. The fourth supposition suggested that employers attribute more value to external elements than specialists and teachers, but it was no found significant difference during the tests. The fifth supposition (new students attribute more value to external elements than to internal elements to the decision model used to choose a specialization program to follow) and the sixth supposition (students attribute more value to internal elements than to external elements to education evaluation) were not accepted, because it was not found significant difference between elements means.

A proficiência e o fluxo de estudantes são desafios importantes a serem enfrentados pelos vários níveis de ensino no Brasil, em especial no ensino médio. Cientes desse desafio, setor público e sociedade civil têm buscado melhorar esses indicadores por meio de alguns programas. O programa Jovem de Futuro é uma dessas iniciativas. Direcionado às escolas públicas de ensino médio, o programa objetiva melhorar a proficiência e fluxo dos alunos por meio de um conjunto de ações focadas em capacitação para a gestão e auxílio financeiro para as escolas. Com o objetivo de verificar o impacto sobre esses resultados, as escolas participantes foram selecionadas por meio de um sorteio aleatório. O presente trabalho realizou análises de impacto desse programa em diferentes dimensões. As estimativas encontradas indicam que o programa teve impacto sobre as notas dos estudantes em quatro das cinco regiões participantes. Quando estatisticamente significante, esse impacto foi de no mínimo 0, 158? para língua portuguesa e 0, 176? em matemática. Com a intenção de entender se os impactos foram diferenciados para determinados grupos de estudantes e escolas, foram também realizadas análises de heterogeneidade. Os resultados apontaram que o programa não teve efeitos diferenciados para os perfis de estudantes analisados. Por outro lado, quando os perfis de escolas são analisados, as estimativas apontam que os estudantes de escolas com melhores indicadores no período pré-tratamento podem ter sido mais beneficiados. O trabalho também realizou a análise de impacto para a probabilidade de evasão e reprovação dos estudantes tratados. Os resultados apontaram que o tratamento diminuiu as chances de evasão e reprovação em regiões onde o programa estabeleceu metas para esses fatores. Finalmente, diante das diferentes direções de impacto sobre notas e fluxo, realizou-se também uma análise de impacto sobre o IDEB. As análises indicaram que em locais onde a piora do fluxo foi relevante os resultados no IDEB não avançaram da mesma maneira do que nas notas dos estudantes. / Low tests scores and low graduation rates are examples of educational challenges in Brazil, especially if we refer to secondary students. Public policies have been created to improve these indices and the \"Jovem de Futuro\" program is one example. We analyzed details of this program to understand if and how it works. \"Jovem de Futuro\" has been a program focused on support for public secondary schools. It provides training for principals and teachers to improve school management and funding for schools. In addition, a randomized controlled trial was designed for selection of treated schools, which ensured our ability to perform a causality analysis. Our results indicate that the program improves student performance in language (Portuguese) and mathematics tests. The scores of treated students increased about 0.2?. Furthermore, we did not find any difference in the performance of students when we grouped them, for example, by sex or race. Our analysis also indicates that students perform better if they are from schools with better previous results. Because repetition and dropout rates are a real problem in schools of secondary level in Brazil, we estimated how effective the program was at changing these rates. Our results indicate repetition and dropout probabilities fell if students are from schools that received goals to improve these rates. On the other hand, if schools did not receive any goal, dropout and repetition probability from students in treated schools increased. Finally, because of these mix effects - better test performance and worse repetition and dropout rates - we calculated and estimated the impact in the Index of Development of Basic Education (IDEB). This index put together: performance in tests and rates of students approved. Our results show that the impact on this index was lower than in the student tests performance in schools from areas with lower approbation rates.

Submitted by Maria Creuza Silva (mariakreuza@yahoo.com.br) on 2016-04-14T20:28:01Z No. of bitstreams: 1 Diss MP. Jussara C. Ferreira. 2014.pdf: 1361568 bytes, checksum: a9f3cf7c397fd01d83b220305f78becb (MD5) / Approved for entry into archive by Maria Creuza Silva (mariakreuza@yahoo.com.br) on 2016-04-18T12:10:25Z (GMT) No. of bitstreams: 1 Diss MP. Jussara C. Ferreira. 2014.pdf: 1361568 bytes, checksum: a9f3cf7c397fd01d83b220305f78becb (MD5) / Made available in DSpace on 2016-04-18T12:10:25Z (GMT). No. of bitstreams: 1 Diss MP. Jussara C. Ferreira. 2014.pdf: 1361568 bytes, checksum: a9f3cf7c397fd01d83b220305f78becb (MD5) / A crescente valorização da qualificação profissional frente às novas exigências do desempenho laboral da sociedade contemporânea traz como consequência intenso investimento em ações educacionais, induzindo, dessa forma, à realização de estudos que possibilitem aferir os resultados delas decorrentes. Este estudo teve como objetivo analisar, sob a ótica de egressos, os efeitos profissionais de dois Cursos de Especialização em Gestão de Hemocentros desenvolvidos por iniciativa do Ministério da Saúde nos anos de 2011 e 2012, sob a coordenação pedagógica da Escola Nacional de Saúde Pública – ENSP/Fiocruz, tendo como grupo alvo a força de trabalho da Hemorrede Pública Nacional atuante em funções estratégicas e intermediárias. Ainda, identificar as condições de suporte organizacional oferecidas aos alunos egressos, antes, durante e no contexto institucional pós-curso. Caracterizou-se como um estudo de caso, exploratório, descritivo e analítico, de natureza quali-quanti. Os resultados foram obtidos por meio de questionários semiestruturados aplicados por meio eletrônico, acrescidos de perguntas abertas. Em um universo de 66 egressos, obteve-se 89,39% de retorno. Os dados qualitativos foram tratados por meio de análise de conteúdo e a consolidação dos dados quantitativos, mediante frequências simples, frequências relativas, porcentagens e médias. Os resultados da avaliação nos níveis de impacto em termos de amplitude e profundidade apontaram para a contribuição do curso no que diz respeito à formação de profissionais para o uso dos instrumentos de gestão e, ao mesmo tempo, à indução do desenvolvimento qualitativo de aspectos atitudinais nos alunos egressos. Destacou-se no escopo da discussão a percepção do desenvolvimento humano decorrente do curso, pertinente à troca de experiências e às metodologias ativas adotadas. Ainda, a influência dele acerca de mudanças organizacionais. O produto referente ao suporte organizacional, psicossocial e material indicou a percepção de pouco apoio; entretanto, mostrou maior nível de apoio antes e durante o evento, em razão do suporte em menor proporção no contexto organizacional póscurso. Partindo das evidências encontradas, conclui-se que os cursos realizados contribuíram para a melhoria da prática profissional em gestão, indicando sua continuidade e aperfeiçoamento, além de indicar a necessidade do desenvolvimento de estratégias de suporte organizacional, visando fomentar maiores níveis de efeitos dos cursos.

O sistema brasileiro de avaliação de programas de pós-graduação vem evoluindo desde 1976, sendo considerado como um dos mais eficientes do mundo. Este sistema tem se mostrado essencial para a formação de recursos humanos de alto nível e para o desenvolvimento efetivo da ciência e tecnologia no País, pois, por meio de seus critérios e indicadores, ele permite avaliar a qualidade dos programas e apontar as áreas que o Estado deseja desenvolver. Este trabalho tem por objetivo propor contribuições à gestão dos programas de pós-graduação stricto sensu em Administração do Brasil, com base nos sistemas de avaliação de pós-graduação norte-americano e brasileiro. Para tanto, procedeu-se uma pesquisa em oito programas: quatro nos Estados Unidos, credenciados pela Association to Advance Collegiate School of Business (AACSB), e quatro no Brasil, reconhecidos e recomendados pela Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). O método de pesquisa foi o estudo de casos múltiplos, baseado nos trabalhos de Eisenhardt (1989) e Yin (2003). A análise de dados seguiu as técnicas de agrupamento e de cluster sugeridas por Miles e Huberman (1994). Os principais resultados indicam diferenças na concepção e no uso dos sistemas pelos programas brasileiros e americanos. Por exemplo, nos Estados Unidos, os programas utilizam o sistema para assegurar o cumprimento da própria missão e atender a um padrão mínimo de qualidade. No Brasil, entretanto, os programas investem no aprimoramento da produção intelectual (qualidade e quantidade), na formação de alunos e na inserção social para cumprir com as exigências do sistema e obter maior nota. Contudo, propõe-se um o modelo de gestão que - além de atender aos requisitos do sistema de avaliação da CAPES - leve em consideração a realidade do programa e demais elementos importantes para seu contínuo aprimoramento, dentre eles, o plano estratégico, que abrange a missão e a visão; o egresso e as estratégias de acesso a recursos para melhor atender a seus stakeholders. / The Brazilian evaluation (or accreditation) system of graduate programs has been evolving since 1976 and it is considered as one of the most efficient in the world. This system has been shown to be essential for the formation of high-level human resources for the effective development of science and technology in the country. By means of its criteria and quality indicators, the newer system is capable of evaluating the quality of programs and to point to the areas that the State desires to develop. The goal of this research is to propose possible extensions to the current system to manage graduate programs in business field in Brazil, by comparing USA and Brazilian evaluation systems. This research was conducted in eight business school programs: four programs in the USA that are accredited by the Association to Advance Collegiate School of Business (AACSB) and four Brazilian programs recognized by the Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). The method used was multiple case study analyses based on the work of Eisenhard (1989) and Yin (2003). For the analysis, we followed the cluster techniques of Miles and Huberman (1994). The results point to the conceptual difference in the use of evaluation systems among program in the USA and Brazil. For example, in the USA, programs use the system to assure that mission and minimum quality standards are met. In Brazil the evaluation system is used as a guide to increase and maintain the programs\' overall evaluations. Further, in Brazil, the system is used to focus on areas of improvement in the quality and the quantity of intellectual production, students\' rates or performance, and social development to achieve the stated goals of the programs and to increase the evaluate score. However, the model of management proposed in this study is intended to reach the requirements of CAPES evaluate system, but also to considerate the program reality and the other important elements for the program\'s continuous improvement. Among the suggestions are: a Strategic Plan, that encloses the mission and the vision of each program. Also, inclusion of the alumni (former students), and the strategies to develop and access financial resources to attend the various needs of the stakeholders.

O sistema brasileiro de avaliação de programas de pós-graduação vem evoluindo desde 1976, sendo considerado como um dos mais eficientes do mundo. Este sistema tem se mostrado essencial para a formação de recursos humanos de alto nível e para o desenvolvimento efetivo da ciência e tecnologia no País, pois, por meio de seus critérios e indicadores, ele permite avaliar a qualidade dos programas e apontar as áreas que o Estado deseja desenvolver. Este trabalho tem por objetivo propor contribuições à gestão dos programas de pós-graduação stricto sensu em Administração do Brasil, com base nos sistemas de avaliação de pós-graduação norte-americano e brasileiro. Para tanto, procedeu-se uma pesquisa em oito programas: quatro nos Estados Unidos, credenciados pela Association to Advance Collegiate School of Business (AACSB), e quatro no Brasil, reconhecidos e recomendados pela Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). O método de pesquisa foi o estudo de casos múltiplos, baseado nos trabalhos de Eisenhardt (1989) e Yin (2003). A análise de dados seguiu as técnicas de agrupamento e de cluster sugeridas por Miles e Huberman (1994). Os principais resultados indicam diferenças na concepção e no uso dos sistemas pelos programas brasileiros e americanos. Por exemplo, nos Estados Unidos, os programas utilizam o sistema para assegurar o cumprimento da própria missão e atender a um padrão mínimo de qualidade. No Brasil, entretanto, os programas investem no aprimoramento da produção intelectual (qualidade e quantidade), na formação de alunos e na inserção social para cumprir com as exigências do sistema e obter maior nota. Contudo, propõe-se um o modelo de gestão que - além de atender aos requisitos do sistema de avaliação da CAPES - leve em consideração a realidade do programa e demais elementos importantes para seu contínuo aprimoramento, dentre eles, o plano estratégico, que abrange a missão e a visão; o egresso e as estratégias de acesso a recursos para melhor atender a seus stakeholders. / The Brazilian evaluation (or accreditation) system of graduate programs has been evolving since 1976 and it is considered as one of the most efficient in the world. This system has been shown to be essential for the formation of high-level human resources for the effective development of science and technology in the country. By means of its criteria and quality indicators, the newer system is capable of evaluating the quality of programs and to point to the areas that the State desires to develop. The goal of this research is to propose possible extensions to the current system to manage graduate programs in business field in Brazil, by comparing USA and Brazilian evaluation systems. This research was conducted in eight business school programs: four programs in the USA that are accredited by the Association to Advance Collegiate School of Business (AACSB) and four Brazilian programs recognized by the Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). The method used was multiple case study analyses based on the work of Eisenhard (1989) and Yin (2003). For the analysis, we followed the cluster techniques of Miles and Huberman (1994). The results point to the conceptual difference in the use of evaluation systems among program in the USA and Brazil. For example, in the USA, programs use the system to assure that mission and minimum quality standards are met. In Brazil the evaluation system is used as a guide to increase and maintain the programs\' overall evaluations. Further, in Brazil, the system is used to focus on areas of improvement in the quality and the quantity of intellectual production, students\' rates or performance, and social development to achieve the stated goals of the programs and to increase the evaluate score. However, the model of management proposed in this study is intended to reach the requirements of CAPES evaluate system, but also to considerate the program reality and the other important elements for the program\'s continuous improvement. Among the suggestions are: a Strategic Plan, that encloses the mission and the vision of each program. Also, inclusion of the alumni (former students), and the strategies to develop and access financial resources to attend the various needs of the stakeholders.

Com a expansão do sistema educacional, em especial do ensino superior no Brasil, intensificou-se a preocupação com a qualidade das instituições educacionais. A pesquisa sobre egressos (ex-alunos) é considerada um dos importantes meios para informar sobre a qualidade institucional e demonstrar os impactos gerados na sociedade. Apesar disso, é observado que as instituições brasileiras raramente utilizam os egressos como fonte de informações para os cursos, e quando captam informações, não as utilizam eficazmente para a melhoria da qualidade educacional. Nesse contexto, esta Tese tem como pergunta de pesquisa: Que indicadores podem subsidiar a avaliação, sob a perspectiva dos egressos, como ferramenta para o aperfeiçoamento dos Programas de Pós-Graduação Stricto Sensu? Para tanto, a pesquisa foi desenvolvida em duas etapas: (a) proposição teórica das dimensões e dos indicadores para Avaliação de Programas de Doutorado em Administração, sob a perspectiva dos egressos; e (b) aplicação desse conjunto de indicadores, junto a uma amostra de egressos, por intermédio de um e-survey, para Avaliação de um Programa de Doutorado em Administração. Os resultados propõem a classificação dos indicadores em três dimensões: (1) Avaliação das Repercussões (mensuração das mudanças ocorridas no nível individual em função de uma determinada intervenção educacional); (2) Avaliação do Relacionamento (análise do nível de participação, envolvimento e engajamento dos alunos e dos egressos na vida da Instituição/Programa) e (3) Avaliação da Qualidade dos Serviços (visão dos egressos sobre a estrutura e os serviços prestados pela Instituição/Programa de formação). A aplicação e validação do conjunto de indicadores, em uma amostra de 141 egressos, mostraram serem válidos e consistentes os instrumentos utilizados e as dimensões propostas, permitindo chegar a constatações com relação às repercussões, ao relacionamento e ao nível de qualidade do Programa de Doutorado avaliado. Nesse sentido, a principal contribuição desta pesquisa reside na proposição das dimensões e indicadores para avaliação de Programas de Doutorado em Administração, a partir da visão dos egressos, que podem ser ratificadas em futuras pesquisas, com replicação dessas dimensões e dos indicadores em Programas de diferentes instituições ou áreas / With the expansion of the educational system, especially higher education in Brazil, concerns about the quality of educational institutions were intensified. Research on graduates (alumni) is considered one of the main sources to inform about the educational quality and to demonstrate the impacts on society. Nevertheless, it is observed that Brazilian institutions rarely consider alumni as a source of information for their courses, and when these institutions capture information, they do not apply them effectively for improving the educational quality. In this context, this Thesis presents the following research question: What indicators can support the evaluation, from alumni\'s perspective, as a tool for improvement of Graduate Stricto Sensu Programs? Therefore, the study was conducted in two stages: (a) theoretical proposition of dimensions and indicators for evaluation of Doctoral Programs in Business Administration, according alumni\'s perspective; and (b) application of this set of indicators in a sample of graduates, through an e-survey, for evaluation of a Doctoral Program in Business Administration. The results suggest the classification of indicators in three dimensions: (1) Impact Evaluation (measurement of changes at the individual level in terms of a particular educational intervention); (2) Relationship Evaluation (analysis of the level of participation, involvement and engagement of students and graduates in the Institution/Program life) and (3) Services Quality Evaluation (the alumni insight into the structure and the services provided by the institution / training program). The application and validation of the set of indicators, in a sample of 141 graduates, showed that the tools used and the proposed dimensions are valid and consistent, allowing reach findings regarding the impact, the relationship and the quality level of the evaluated Doctoral Program. In this sense, the main contribution of this research is the proposition of dimensions and indicators for evaluation of Doctoral programs in Business Administration, from the alumni\'s perspective, which can be ratified in future researches, with replication of these dimensions and indicators in programs of different institutions or areas.

Submitted by Angela Maria de Oliveira (amolivei@uepg.br) on 2017-12-19T11:28:49Z No. of bitstreams: 2 license_rdf: 811 bytes, checksum: e39d27027a6cc9cb039ad269a5db8e34 (MD5) Graciete Tozetto Goes.pdf: 4862524 bytes, checksum: a7097d2c8b8535de06aa9c5bad46ca66 (MD5) / Made available in DSpace on 2017-12-19T11:28:49Z (GMT). No. of bitstreams: 2 license_rdf: 811 bytes, checksum: e39d27027a6cc9cb039ad269a5db8e34 (MD5) Graciete Tozetto Goes.pdf: 4862524 bytes, checksum: a7097d2c8b8535de06aa9c5bad46ca66 (MD5) Previous issue date: 2017-12-01 / O objeto desta tese é a avaliação do Programa Institucional de Bolsa de Iniciação à Docência - PIBID, desenvolvido na Universidade Estadual de Ponta Grossa. O objetivo geral foi analisar a avaliação do PIBID realizada por egressos do programa atuantes na docência da Educação Básica, possibilitando identificar possíveis influências em sua atuação profissional. Os objetivos específicos foram: a) caracterizar o PIBID proposto pela CAPES para as Instituições de Ensino Superior brasileiras, em particular os projetos desenvolvidos na UEPG; b) investigar os significados da avaliação do PIBID atribuídos pelos licenciados egressos do Programa; c) discutir potencialidades e fragilidades do PIBID evidenciados nos resultados do processo avaliativo realizado com os licenciados egressos do Programa; d) apontar contribuições, perspectivas e desafios para o desenvolvimento de um programa de formação inicial de iniciação à docência, voltado à melhoria dos processos formativos na licenciatura e do ensino nas escolas; e) apresentar vantagens e limitações da avaliação de programas educacionais a partir dos egressos. A questão norteadora da pesquisa foi: Qual a avaliação que os licenciados egressos do PIBID fazem do Programa para sua formação inicial e profissão docente? A tese é de que os beneficiários egressos contribuem para a avaliação de programas educacionais, em particular o PIBID, evidenciando potencialidades, fragilidades e incoerências. Os pressupostos teóricos da avaliação educacional fundamentaram-se em Casali (2007), Guba e Lincoln (2011) e Rodrigues (1995). O referencial teórico sobre avaliação de programas educacionais dialoga com Afonso (2003, 2007) Cousins e Earl (1992), Draibe (2001), Fernandes (2009b, 2011), Vianna (1999, 2005, 2014) e Worthen, Sanders e Fitzpatrick (2004), entre outros. A pesquisa, partindo do método crítico-dialético, é de abordagem qualitativa, do tipo estudo de caso avaliativo, adotou como procedimentos de coleta de dados a análise documental da legislação nacional sobre o PIBID, projetos e relatórios institucionais e de área do PIBID/UEPG; questionários e entrevistas com licenciados egressos no período de 2010 a 2015; e questionários com coordenadores institucionais e de áreas do Programa. Para a análise dos dados foram utilizados os procedimentos da análise de conteúdo de Bardin (2002). Na avaliação do Programa ficou evidente a relevância atribuída pelos egressos à inserção na escola, enquanto espaço ampliado à sua formação acadêmica para a compreensão da relação teoria-prática no exercício da docência. A participação no PIBID, segundo os egressos, contribuiu significativamente para sua formação e atuação docente. Na avaliação de diferentes dimensões do Programa, revelaram alto grau de satisfação com o PIBID e consideraram que os objetivos de motivação e permanência na docência foram atingidos, embora tenham apontado algumas fragilidades: falta de recursos; baixo valor da bolsa; em alguns casos, dificuldades de relação com as escolas e professores supervisores; e falta integração entre os subprojetos institucionais. A avaliação de programas educacionais é sempre desafiadora, e se intensifica ao propor realizá-la a partir dos egressos, pois envolve dificuldades de contato e de convencimento para participação. No entanto, a pesquisa aponta que a avaliação de programas educacionais centrada nos participantes é necessária para análise das contribuições e fragilidades, bem como para o aprimoramento do programa. / The object of this thesis is the Institutional Scholarship Teaching Initiation Program – PIBID – developed in the scope of the State University of Ponta Grossa - UEPG. The main objective was analyze the PIBID evaluation performed by graduates from the program who act teaching in the Basic Education, enabling to identify possible influences in their professional performance, due to their participation in the Program. The specific aims were: featuring the PIBID proposed by CAPES for Brazilian Higher education institutions, especially the projects developed in the UEPG; investigating the means of PIBID evaluation attributed by the graduates from the Program; deliberating on PIBID possibilities and weaknesses evidenced in the results from the evaluation process carried out with graduates from the Program; pointing to contributions, perspectives and challenges for development of an initial training for teaching addressed to improve the training processes in bachelor degree and the teaching in schools; presenting advantages and limitations of education programs from the graduates. The research problem was: What is the evaluation that graduates from PIBID carry out on the Program for their initial training and teaching profession? It is based on the theoretical referential about evaluation programs by Vianna (1999, 2005, 2014), Worthen, Sanders e Fitzpatrick (2004), Fernandes (2009b, 2011); and on teachers initial training mainly by Nóvoa (1995a, 1995b, 2002, 2009a), Contreras (2002), Tardif (2012), Marcelo (2009), Gatti and Nunes (2009), Gatti e Barreto (2009, among others. Evaluation theoretical assumptions are based on Rodrigues (1995), in the critical paradigm of evaluation. The research uses the evaluative case study methodology, with the following data collection procedures: documental analysis of Brazilian legislation on the PIBID, institutional and PIBID/UEPG of projects and reports; questionnaires and interviews with graduates in the period from 2010 to 2015; and questionnaires with institutional coordination and fields of the Program. For data analysis, the Content Analysis procedures by Bardin (2002) were used. Peculiarities of PIBID/UEPG were identified, which, in graduates opinion, reaches its objectives. In graduates’ evaluates, the Program contributes significantly for their training, providing reliability and autonomy for teaching performance. Despite the high satisfaction degree with the Program, some weaknesses are pointed: lack of resources; low value of the scholarship; in some cases, difficulties of relationship with schools and supervising professors, lack of dialogue among subprojects that enable actions and reflections really integrated. Evaluation processes during the Program presented training characteristics. The evaluation is Always a challenge, which is intensified when propose carry it out with graduates. There are difficulties to keep in touch with them and to convince them to participate in the evaluation processes.

Com a expansão do sistema educacional, em especial do ensino superior no Brasil, intensificou-se a preocupação com a qualidade das instituições educacionais. A pesquisa sobre egressos (ex-alunos) é considerada um dos importantes meios para informar sobre a qualidade institucional e demonstrar os impactos gerados na sociedade. Apesar disso, é observado que as instituições brasileiras raramente utilizam os egressos como fonte de informações para os cursos, e quando captam informações, não as utilizam eficazmente para a melhoria da qualidade educacional. Nesse contexto, esta Tese tem como pergunta de pesquisa: Que indicadores podem subsidiar a avaliação, sob a perspectiva dos egressos, como ferramenta para o aperfeiçoamento dos Programas de Pós-Graduação Stricto Sensu? Para tanto, a pesquisa foi desenvolvida em duas etapas: (a) proposição teórica das dimensões e dos indicadores para Avaliação de Programas de Doutorado em Administração, sob a perspectiva dos egressos; e (b) aplicação desse conjunto de indicadores, junto a uma amostra de egressos, por intermédio de um e-survey, para Avaliação de um Programa de Doutorado em Administração. Os resultados propõem a classificação dos indicadores em três dimensões: (1) Avaliação das Repercussões (mensuração das mudanças ocorridas no nível individual em função de uma determinada intervenção educacional); (2) Avaliação do Relacionamento (análise do nível de participação, envolvimento e engajamento dos alunos e dos egressos na vida da Instituição/Programa) e (3) Avaliação da Qualidade dos Serviços (visão dos egressos sobre a estrutura e os serviços prestados pela Instituição/Programa de formação). A aplicação e validação do conjunto de indicadores, em uma amostra de 141 egressos, mostraram serem válidos e consistentes os instrumentos utilizados e as dimensões propostas, permitindo chegar a constatações com relação às repercussões, ao relacionamento e ao nível de qualidade do Programa de Doutorado avaliado. Nesse sentido, a principal contribuição desta pesquisa reside na proposição das dimensões e indicadores para avaliação de Programas de Doutorado em Administração, a partir da visão dos egressos, que podem ser ratificadas em futuras pesquisas, com replicação dessas dimensões e dos indicadores em Programas de diferentes instituições ou áreas / With the expansion of the educational system, especially higher education in Brazil, concerns about the quality of educational institutions were intensified. Research on graduates (alumni) is considered one of the main sources to inform about the educational quality and to demonstrate the impacts on society. Nevertheless, it is observed that Brazilian institutions rarely consider alumni as a source of information for their courses, and when these institutions capture information, they do not apply them effectively for improving the educational quality. In this context, this Thesis presents the following research question: What indicators can support the evaluation, from alumni\'s perspective, as a tool for improvement of Graduate Stricto Sensu Programs? Therefore, the study was conducted in two stages: (a) theoretical proposition of dimensions and indicators for evaluation of Doctoral Programs in Business Administration, according alumni\'s perspective; and (b) application of this set of indicators in a sample of graduates, through an e-survey, for evaluation of a Doctoral Program in Business Administration. The results suggest the classification of indicators in three dimensions: (1) Impact Evaluation (measurement of changes at the individual level in terms of a particular educational intervention); (2) Relationship Evaluation (analysis of the level of participation, involvement and engagement of students and graduates in the Institution/Program life) and (3) Services Quality Evaluation (the alumni insight into the structure and the services provided by the institution / training program). The application and validation of the set of indicators, in a sample of 141 graduates, showed that the tools used and the proposed dimensions are valid and consistent, allowing reach findings regarding the impact, the relationship and the quality level of the evaluated Doctoral Program. In this sense, the main contribution of this research is the proposition of dimensions and indicators for evaluation of Doctoral programs in Business Administration, from the alumni\'s perspective, which can be ratified in future researches, with replication of these dimensions and indicators in programs of different institutions or areas.