Submitted by Fabio Sobreira Campos da Costa (fabio.sobreira@ufpe.br) on 2016-08-05T13:36:08Z No. of bitstreams: 2 license_rdf: 1232 bytes, checksum: 66e71c371cc565284e70f40736c94386 (MD5) Bruna_Rafaella_S_Claudino_Bezerra_Dissertação_Engenharia_de_Produção_326.pdf: 1870953 bytes, checksum: 90f4ee7fc975583e6fd8da79c89a7c50 (MD5) / Made available in DSpace on 2016-08-05T13:36:09Z (GMT). No. of bitstreams: 2 license_rdf: 1232 bytes, checksum: 66e71c371cc565284e70f40736c94386 (MD5) Bruna_Rafaella_S_Claudino_Bezerra_Dissertação_Engenharia_de_Produção_326.pdf: 1870953 bytes, checksum: 90f4ee7fc975583e6fd8da79c89a7c50 (MD5) Previous issue date: 2016-02-26 / CAPEs / A avaliação da qualidade de bases de periódicos científicos é de extrema importância para os sistemas educacionais e de pesquisas, visto que, a partir dela, podem-se realizar ações que resultem na formação de pessoas e instituições qualificadas para atender às necessidades de empreendimentos públicos e privados. As linhas de ações mais conhecidas são: Avaliação de cursos de pós-graduação; Investimentos na formação de recursos de alto nível no país e exterior, dentre outras. A autora propôs uma metodologia única para a classificação de eficiência de periódicos de várias áreas do conhecimento, onde usou como ferramenta á Análise Envoltória de Dados (DEA) e base de dados de periódicos do SCImago. Outra contribuição da autora para a avaliação das áreas de conhecimento foi a criação de três indicadores: Indicador de Representatividade (R); Indicador do Prestígio das Publicações Brasileiras na Área (P); e, Indicador de Associação da Eficiência das Revistas no Qualis (E). Esses indicadores serviram para comparar a base de qualificação Qualis/CAPES em relação à base de qualificação internacional SCImago. Obtivemos que, em geral, existe uma baixa representatividade de publicações brasileiras que estão avaliadas no Qualis/CAPES em relação a quantidade de periódicos existentes na base SCImago. Por outro lado, a eficiência média dos periódicos avaliados no Qualis/CAPES é, na maioria das áreas, superior a eficiência média da área correspondente na base SCImago, indicando que existe uma boa seletividade por parte dos pesquisadores destas áreas com relação a eficiência do periódico. Finalmente, a análise do indicador E sugere que não existe uma associação entre o ranking de qualidade dos periódicos proposto pelo Qualis/CAPES e a eficiência em termos de Produto/Custo dos periódicos. / The assessment of the quality of journal databases is extremely important to education and research systems, since from it one may take actions that result in higher qualified people and institutions to attend the demand of the private and public sectors. The most common actions are: evaluation of graduate programs, application of financial resources for human resources qualification in the country and abroad, among others. The author proposes a unique methodology for the classification of the efficiency of journals in many areas of knowledge, where the data envelopment analysis (DEA) was applied to the journals in the SCImago database. Another contribution of this work was the proposal of three indicators: representativeness indicator (R); prestigious indicator of the Brazilian publications per area (P); and the efficiency association indicator of the journals in the Qualis/CAPES system (E). These indicators were used to compare Qualis/CAPES database and the SCImago database. Our analysis show that, in general, there exists a low representativeness of the Brazilian publications evaluated at the Qualis/CAPES with respect to number of journals in the SCImago database. On the other hand, the mean efficiency of the journals evaluated in the Qualis/CAPES is, in most areas, higher than the mean efficiency of the corresponding area in the SCImago database, suggesting that Brazilian researches in those areas have a good selectivity in what refers to the journal efficiency. Finally, the analysis of the E indicator suggests that there is no association between the Qualis/CAPES journal ranking and the journal Product/Cost efficiency.

O objetivo da pesquisa é analisar a comunicação científica da área de Turismo para fornecer subsídios à política científica na avaliação da produção com base nas suas características. Parte do questionamento sobre a adequação dos critérios de avaliação da área de Administração, Ciências Contábeis e Turismo, analisando se as três subáreas são atendidas da mesma maneira. Trata-se de uma pesquisa exploratória descritiva com abordagem quantitativa dos dados, baseada na análise dos documentos das grandes áreas de Ciências Sociais Aplicadas e Humanas, dos periódicos classificados na área Administração, Ciências Contábeis e Turismo e dos currículos Lattes dos pesquisadores dos PPG\"s da área de Turismo. Está estruturada em seis capítulos, sendo o primeiro a introdução e o último as conclusões. O capítulo 2 inicia traçando um panorama da evolução da ciência para, em seguida, tratar da comunicação científica e da avaliação. Para tanto se utiliza do conhecimento da Ciência da Informação. O terceiro capítulo apresenta alguns estudos sobre como a área de Turismo e suas abordagens, bem como algumas considerações sobre a comunicação científica na área e a avaliação. Os procedimentos metodológicos utilizados são apresentados no capítulo 4, e as análises dos dados no capítulo 5. Os resultados apontam que, Administração, Ciências Contábeis e Turismo são áreas em diferentes estágios de desenvolvimento, o que resulta em magnitudes incomparáveis, de número de programas de pós-graduação, de pesquisadores e de produção científica, e que redunda em uma estrutura de comunicação científica mais consolidada, com periódicos melhor estabelecidos - os critérios utilizados favorecem a ADM, cujos periódicos predominam nos estratos mais altos. Observou também que os pesquisadores de Turismo têm grande parte das suas publicações em eventos, seguida de artigos em periódicos nacionais, na maioria classificados no estrato B3 do Qualis. Destaca o fato que essas características podem levar a uma subavaliação da sua produção. Conclui que é necessária uma adaptação do modelo de avaliação Qualis da Capes para a área que considere seu estágio de desenvolvimento e sua produção, que considere a participação em eventos, e valorize a sua identidade social e humana, não sendo somente uma atividade econômica. / The objective is analyze the scientific communication of the Tourism area research to provide subsidies for scientific research in the evaluation of production at the national level based on its characteristics. It starts questioning about the adequacy of the evaluation criteria of the tourism area, comparing it with Administration and the Accounting Sciences the other subareas that are classified together, to identify if they correspond at the same way to the three subareas. This is a descriptive exploratory research with a quantitative data approach that was carried out through analyzes of the area documents from the major areas of Applied Social Sciences and Humanities, through the periodicals classified in the area of Administration, Accounting and Tourism and analysis of Lattes data of the researchers from the postgraduate programs of the Tourism area. It is structured in six chapters, the first makes and introduction and the last present some conclusions. Chapter 2 begins by drawing a panorama of the evolution of science and scientific knowledge and then dealing with scientific communication and evaluation. To do so, the tools of Information Science were used. The third chapter presents some of the main studies on tourism and its approaches, as well as some considerations about scientific communication in the area and evaluation. The methodological procedures were presented on chapter 4 and the data analyzes were done in chapter 5. The results point out to the Administration, Accounting Sciences and Tourism are areas at different stages of development and the criteria used are better for Administration, a larger area. It also notes that tourism researchers have a large part of their publications in events, followed by articles in national journals, most of them classified as B3. It draws attention to the fact that these characteristics could lead to underestimation of their production. It concludes the Capes Qualis evaluation model needs to be adapted, based on other types of criteria, more qualitative rather than quantitative, that valorize the human and social aspects of tourism.

O objetivo da pesquisa é analisar a comunicação científica da área de Turismo para fornecer subsídios à política científica na avaliação da produção com base nas suas características. Parte do questionamento sobre a adequação dos critérios de avaliação da área de Administração, Ciências Contábeis e Turismo, analisando se as três subáreas são atendidas da mesma maneira. Trata-se de uma pesquisa exploratória descritiva com abordagem quantitativa dos dados, baseada na análise dos documentos das grandes áreas de Ciências Sociais Aplicadas e Humanas, dos periódicos classificados na área Administração, Ciências Contábeis e Turismo e dos currículos Lattes dos pesquisadores dos PPG\"s da área de Turismo. Está estruturada em seis capítulos, sendo o primeiro a introdução e o último as conclusões. O capítulo 2 inicia traçando um panorama da evolução da ciência para, em seguida, tratar da comunicação científica e da avaliação. Para tanto se utiliza do conhecimento da Ciência da Informação. O terceiro capítulo apresenta alguns estudos sobre como a área de Turismo e suas abordagens, bem como algumas considerações sobre a comunicação científica na área e a avaliação. Os procedimentos metodológicos utilizados são apresentados no capítulo 4, e as análises dos dados no capítulo 5. Os resultados apontam que, Administração, Ciências Contábeis e Turismo são áreas em diferentes estágios de desenvolvimento, o que resulta em magnitudes incomparáveis, de número de programas de pós-graduação, de pesquisadores e de produção científica, e que redunda em uma estrutura de comunicação científica mais consolidada, com periódicos melhor estabelecidos - os critérios utilizados favorecem a ADM, cujos periódicos predominam nos estratos mais altos. Observou também que os pesquisadores de Turismo têm grande parte das suas publicações em eventos, seguida de artigos em periódicos nacionais, na maioria classificados no estrato B3 do Qualis. Destaca o fato que essas características podem levar a uma subavaliação da sua produção. Conclui que é necessária uma adaptação do modelo de avaliação Qualis da Capes para a área que considere seu estágio de desenvolvimento e sua produção, que considere a participação em eventos, e valorize a sua identidade social e humana, não sendo somente uma atividade econômica. / The objective is analyze the scientific communication of the Tourism area research to provide subsidies for scientific research in the evaluation of production at the national level based on its characteristics. It starts questioning about the adequacy of the evaluation criteria of the tourism area, comparing it with Administration and the Accounting Sciences the other subareas that are classified together, to identify if they correspond at the same way to the three subareas. This is a descriptive exploratory research with a quantitative data approach that was carried out through analyzes of the area documents from the major areas of Applied Social Sciences and Humanities, through the periodicals classified in the area of Administration, Accounting and Tourism and analysis of Lattes data of the researchers from the postgraduate programs of the Tourism area. It is structured in six chapters, the first makes and introduction and the last present some conclusions. Chapter 2 begins by drawing a panorama of the evolution of science and scientific knowledge and then dealing with scientific communication and evaluation. To do so, the tools of Information Science were used. The third chapter presents some of the main studies on tourism and its approaches, as well as some considerations about scientific communication in the area and evaluation. The methodological procedures were presented on chapter 4 and the data analyzes were done in chapter 5. The results point out to the Administration, Accounting Sciences and Tourism are areas at different stages of development and the criteria used are better for Administration, a larger area. It also notes that tourism researchers have a large part of their publications in events, followed by articles in national journals, most of them classified as B3. It draws attention to the fact that these characteristics could lead to underestimation of their production. It concludes the Capes Qualis evaluation model needs to be adapted, based on other types of criteria, more qualitative rather than quantitative, that valorize the human and social aspects of tourism.

Dentre os problemas da universidade pública hoje está o da ampliação desmedida de publicações científicas com o intuito de colocar o Brasil no rol dos melhores países em ciência e tecnologia sem um correspondente aumento na qualidade do que se produz. Em consequência, o aumento de nossa produção tem transformado o caráter de autarquia da instituição acadêmica e parece ser prejudicial à universidade, conduzindo-a de um estado de instituição social a outro de mera organização social. Nesta esteira, poderíamos quem sabe afirmar que o Sistema Qualis, da Capes, surge como um controle externo sobre o que se tem feito e produzido no ensino superior público e que apesar de seu acolhimento como regulador e hierarquizador da produção científica nacional por meio da publicação de periódicos, aparentemente sua aplicação não tem sido isenta de controvérsias. Parece-nos que há uma dissociação entre o que prega o discurso oficial por meio do Qualis e a realidade científica das universidades públicas, de vez que este tem ditado como o meio científico deve ajustar sua produção para atender uma demanda de progresso científico que deverá crescer em competência e excelência acadêmicas, obtendo-se assim, supostamente, qualidade. Por isso, propomos analisar os critérios utilizados pelo Sistema Qualis para a caracterização da excelência da produção acadêmica brasileira. / Among the public university problems today there is the out of measure enlargement of scientific publications with the purpose of inserting Brazil in the roll of the best countries in science and technology, without the corresponding increase in its publications quality. As a result, the increase of our production has been transforming the autarchy character and it seems to be harmful to university, conducting it from a state of social institution to another of simple social organization. On this course, we could assert that the Qualis System from Capes, arises as an external control over what has been done and produced in the public superior education and besides its welcoming as regulator and hierarchical organizer of the national scientific production by means of publication of periodicals, apparently its application has not been free from controversies. It seems that there is dissociation between what the official discourse preaches through Qualis and the scientific reality in public universities, since this system has been dictating how the scientific circle should adjust its production to supply a scientific progress demand, which should grow in academic competency and excellence, thus supposedly obtaining quality. For this reason, we propose to analyze what Qualis criteria understands by quality in the context of Brazilian academic production.

O processo de avaliação dos programas de pós-graduação brasileiros foi iniciado pela Capes na década de 1970, consolidando-se com o sistema Qualis, cujo objetivo é classificar os milhares de cursos existentes atualmente no país. Mais especificamente, são nomeadas comissões de área, cujo papel consiste na definição e aplicação de critérios para assegurar o mérito científico dos programas, no que tange à sua proposta, ao seu corpo docente, à titulação de novos mestres e doutores e à publicação da pesquisa em veículos reconhecidos. Como um reflexo do que vem acontecendo mundialmente, o periódico científico se sobressai em relação aos outros tipos de documento, como decorrência de um processo histórico que culminou nas bases de dados, tornando-se a principal fonte de informação para avaliação de produção científica. Esta pesquisa teve como objetivo geral contribuir com o processo de avaliação da produção científica nacional, por meio de análise das fontes de informação que compõem os critérios de classificação dos periódicos utilizados nas áreas de ciências sociais aplicadas. Os objetivos específicos foram: 1) identificar as fontes de informação que podem ser classificadas efetivamente como base de dados, segundo critérios específicos que permitam atestar a qualidade científica e/ou editorial periódico; 2) identificar as fontes de informação que possuem critérios de seleção específicos que permitam atestar a qualidade científica e/ou editorial dos periódicos e os disponibilizam em seus sites; 3) analisar o uso que tem sido feito dessas fontes nas diferentes áreas de avaliação dos programas de pós-graduação. Os resultados permitiram observar que das 17 fontes de informação analisadas somente 7 foram reconhecidas como bases de dados e declaram utilizar critérios de seleção de periódicos. Todas as fontes de informação que não mencionam critério de seleção eram utilizadas pela área de Ciências Sociais Aplicadas I, no triênio de 2007-2009, consistindo de fontes temáticas de Ciência da Informação e Comunicação, que deixaram de figurar entre os critérios da área no documento que os atualiza, publicado em 2012. Entre todas as áreas de avaliação que compõem a grande área de Ciências Sociais Aplicadas destacou-se o uso das bases com cobertura internacional (Web of Science e Scopus) e regional (SciELO, LATINDEX e REDALYC). Outro aspecto importante foi o uso do Fator de Impacto para classificação dos periódicos pelas áreas de Economia e Administração, Ciências Contábeis e Turismo, a partir do triênio de 2004-2006. Por fim, observou-se que, do ponto de vista dos profissionais que atuam nas bases de dados, existe uma percepção mais aguçada dos quesitos sobre a qualidade esperada de um periódico científico. Por outro lado, quem está ligado ao meio editorial e às comissões das áreas não necessariamente percebe os detalhes fundamentais à efetividade da comunicação científica, quais sejam: existência de critérios de seleção de periódicos, presença de um conselho editorial atuante, diversidade geográfica dos autores, revisores ad hoc e membros do conselho editorial e informações sobre a lista de títulos dos periódicos indexados pela fonte de informação. / The evaluation of graduation, by Capes, from 1970s, when it began a process that has been developed since then, resulting in the Qualis, whose goal is to assess thousands of postgraduate programs in Brazil. Specifically, there are trained committees, whose objective is to define and apply the criteria to ensure the scientific merit of the programs in terms of their proposal, its faculty, titration of new teachers and doctors, and the publication of research findings in recognized publishing vehicles. As a reflection of what is happening worldwide, the scientific journal stands in relation to other types of document, because of a historical process which culminated in the databases as the main source of information for evaluation of scientific production. This research aims to contribute to the process of evaluation of national scientific production, through the analysis of information sources that make up the criteria for classification of the scientific journals used in the areas of applied social sciences. The specific objectives were: 1) to identify the sources of information that can be classified effectively as a database, according to specific criteria that allow to test the scientific and/or editorial quality, 2) to identify which information sources have specific selection criteria that allow to test the scientific and/or publishing quality and if they are provided on their websites, and 3) to evaluate the use that has been made of these sources in different areas of assessment. Results showed that, from the 17 sources of information analyzed, only 7 were recognized as databases and were declaring to use criteria for selecting the scientific journals. All sources of information that were not mentioned a selection criteria were used for the area of Applied Social Sciences I in the triennium 2007-2009, consisting of thematic sources of Information Science and Communication, these sources are no longer available among the criteria in the area of the document that updates the criteria of the area, published in 2012. Among all evaluation areas that comprise the large area of applied social sciences, the use of bases with international coverage is the most important (Web of Science and Scopus) and regional (SciELO, LATINDEX and REDALYC) in most areas. Another important aspect was the use of the Impact Factor for the scientific journals classification, the areas of Economics and Business Administration, Accounting and Tourism, since the three-year period from 2004-2006. Finally, it was observed that, from the professional\'s point of view, there is a better perception regarding questions about the criteria that analyzes the expected quality of a scientific journal. On the other hand, who is linked to the editorial and area committees, cannot necessarily perceive the details that are critical to the effectiveness of scientific communication: the existence of periodic selection criteria, the presence of an active editorial board, the existence of a geographic diversity of the authors, ad hoc reviewers and editorial board members and information about the list of titles of the scientific journals indexed by the source of information.

Conhecer as especificidades da comunicação científica em biodiversidade, por meio da avaliação dos periódicos que veiculam resultados de pesquisa na área. O estudo partiu dos periódicos científicos, nacionais e estrangeiros, classificados pelo Programa Qualis da Área de Biodiversidade, referente ao ano 2012, pertencentes às áreas de botânica, oceanografia, zoologia e ecologia. Para a avaliação dos periódicos, definiu-se um plano metodológico composto por duas etapas. A primeira incluiu a análise dos periódicos a partir dos indicadores bibliométricos, realizada a partir da porcentagem captada pela janela de citações de dois anos do Fator de Impacto e do próprio Fator de Impacto no período de 2007 a 2011, utilizando quartis para identificação dos periódicos de maior e menor posição no ranking da área, segundo cada um destes indicadores. A segunda etapa teve como objetivo realizar a análise dos aspectos formais dos periódicos, e considerou: tempo de existência ou duração, pontualidade, periodicidade, quantidade de artigos publicados por ano, porcentagem de artigos de pesquisa, datas de recebimento e aprovação, revisão por pares e idiomas de publicação. Dentre os principais resultados obtidos a partir da análise dos indicadores biblométricos, estão: os periódicos classificados pelo Qualis Biodiversidade apresentam uma baixa média, tanto da porcentagem da janela de citação, como do próprio Fator de Impacto; e 75% dos periódicos BOZE possuem índices abaixo de 20% para a janela de citação de dois anos. A análise dos aspetos formais não revelou diferenças significativas entre os periódicos, porém revelou a necessidade de uma revisão da qualidade dos periódicos classificados nos estratos B3 e B4. Constatou-se que as áreas BOZE apresentam diferenças significativas quanto à dinâmica de citações da produção científica, com destaque para as áreas de ecologia (maior obsolescência da literatura) e zoologia (menor obsolescência da literatura) que demonstraram desempenhos extremos. / Knowing the specifics of scientific communication in biodiversity, through the evaluation of journals that present research results in the area. The study was based on scientific journals, domestic and foreign, sorted by the 2012 Qualis Program for Biodiversity pertaining to the areas of botany, oceanography, zoology and ecology. A two steps method for the evaluation of journals was defined. The first included the analysis of the journals from the bibliometric indicators, carried out based on the citation percentage by quartile in a two year window of citations measuring the variation in impact factors over the years. The second aims to perform the analysis of the formal aspects of the journals, in particular: time of existence or duration, punctuality, frequency, number of articles published per year, percentage of research articles, dates of receipt and approval, review by peers and number of languages it is published in. Among the results of the study, it was found that the areas BOZE significant differences in the dynamics of scientific citations, highlighting the areas of ecology (greater obsolescence of literature) and zoology (lower obsolescence of literature) who demonstrated extreme performances.

Made available in DSpace on 2014-12-17T15:38:43Z (GMT). No. of bitstreams: 1 AnaLFC.pdf: 456581 bytes, checksum: f65ab373e503e63de2629bbf3e41ce90 (MD5) Previous issue date: 2006-06-23 / Conselho Nacional de Desenvolvimento Cient?fico e Tecnol?gico / Recently, Brazilian scientific production has increased greatly, due to demands for productivity from scientific agencies. However, this high increases requires a more qualified production, since it s essential that publications are relevant and original. In the psychological field, the assessment scientific journals of the CAPES/ANPEPP Commission had a strong effect on the scientific community and raised questions about the chosen evaluation method. Considering this impact, the aim of this research is a meta-analysis on the assessment of Psychological journals by CAPES to update the Qualis database. For this research, Psychology scientific editors (38 questionnaires were applied by e-mail) were consulted, also 5 librarians who work with scientific journals assessment (semi-structured interviews) and 8 members who acted as referees in the CAPES/ANPEPP Commission (open questions were sent by e-mail). The results are shown through 3 analysis: general evaluation of the Qualis process (including the Assessment Committee constitution), evaluation criteria used in the process and the effect of the evaluation on the scientific community (changes on the editing scene included). Some important points emerged: disagreement among different actors about the suitability of this evaluation model; the recognition of the improvement of scientific journals, mainly toward normalization and diffusion; the verification that the model does not point the quality of the journal, i.e., the content of the scientific articles published in the journal; the disagreement with the criteria used, seemed necessary and useful but needed to be discussed and cleared between the scientific community. Despite these points, the scientific journals evaluation still is the main method to assure quality for Psychology publications / A produ??o cient?fica brasileira tem passado por intensas mudan?as visando atender ?s demandas por produtividade dos pesquisadores. Entretanto, a multiplica??o de produtos acad?micos explicita a necessidade de qualifica??o dessa produ??o, uma vez que ? imprescind?vel a publica??o de material relevante e inovador. Na Psicologia, a avalia??o de peri?dicos empreendida pela Comiss?o CAPES/ANPEPP gerou grande repercuss?o na comunidade cient?fica e suscita questionamentos em torno do modelo de avalia??o utilizado. Considerando este impacto, o objetivo do trabalho ? fazer uma meta-avalia??o sobre o processo de avalia??o de peri?dicos cient?ficos utilizado nas revistas de Psicologia pela CAPES para alimenta??o da classifica??o Qualis. Para a pesquisa, foram consultados editores de revistas de Psicologia (n=38, question?rio enviado por e-mail), bibliotec?rios envolvidos com avalia??o de peri?dicos (n=5, entrevistas semi-estruturadas) e pesquisadores que participaram/participam da Comiss?o de Avalia??o (n=8, quest?es abertas via e-mail). Os resultados foram agrupados em 3 eixos tem?ticos: avalia??o geral sobre o processo de avalia??o Qualis (incluindo posicionamento sobre constitui??o das Comiss?es de Avalia??o), crit?rios de avalia??o utilizados no modelo adotado e os efeitos decorrentes das avalia??es para a comunidade cient?fica e mudan?as percebidas no quadro editorial. Alguns aspectos centrais ficaram evidenciados: a diverg?ncia entre os atores envolvidos quanto ? adequa??o do modelo em retratar a realidade editorial da ?rea; a discord?ncia em rela??o aos crit?rios adotados, que s?o vistos, simultaneamente, como necess?rios e ?teis; o reconhecimento da melhoria das revistas, principalmente no que se refere ? normaliza??o e difus?o; a indica??o de que esse modelo de avalia??o n?o aprecia a qualidade da revista propriamente dita, ou seja, o conte?do dos peri?dicos por meio dos artigos. Apesar desses pontos, a avalia??o dos peri?dicos em Psicologia continua a ser o principal instrumento para garantir um padr?o m?nimo de qualidade nas publica??es da ?rea

Dentre os problemas da universidade pública hoje está o da ampliação desmedida de publicações científicas com o intuito de colocar o Brasil no rol dos melhores países em ciência e tecnologia sem um correspondente aumento na qualidade do que se produz. Em consequência, o aumento de nossa produção tem transformado o caráter de autarquia da instituição acadêmica e parece ser prejudicial à universidade, conduzindo-a de um estado de instituição social a outro de mera organização social. Nesta esteira, poderíamos quem sabe afirmar que o Sistema Qualis, da Capes, surge como um controle externo sobre o que se tem feito e produzido no ensino superior público e que apesar de seu acolhimento como regulador e hierarquizador da produção científica nacional por meio da publicação de periódicos, aparentemente sua aplicação não tem sido isenta de controvérsias. Parece-nos que há uma dissociação entre o que prega o discurso oficial por meio do Qualis e a realidade científica das universidades públicas, de vez que este tem ditado como o meio científico deve ajustar sua produção para atender uma demanda de progresso científico que deverá crescer em competência e excelência acadêmicas, obtendo-se assim, supostamente, qualidade. Por isso, propomos analisar os critérios utilizados pelo Sistema Qualis para a caracterização da excelência da produção acadêmica brasileira. / Among the public university problems today there is the out of measure enlargement of scientific publications with the purpose of inserting Brazil in the roll of the best countries in science and technology, without the corresponding increase in its publications quality. As a result, the increase of our production has been transforming the autarchy character and it seems to be harmful to university, conducting it from a state of social institution to another of simple social organization. On this course, we could assert that the Qualis System from Capes, arises as an external control over what has been done and produced in the public superior education and besides its welcoming as regulator and hierarchical organizer of the national scientific production by means of publication of periodicals, apparently its application has not been free from controversies. It seems that there is dissociation between what the official discourse preaches through Qualis and the scientific reality in public universities, since this system has been dictating how the scientific circle should adjust its production to supply a scientific progress demand, which should grow in academic competency and excellence, thus supposedly obtaining quality. For this reason, we propose to analyze what Qualis criteria understands by quality in the context of Brazilian academic production.

Conhecer as especificidades da comunicação científica em biodiversidade, por meio da avaliação dos periódicos que veiculam resultados de pesquisa na área. O estudo partiu dos periódicos científicos, nacionais e estrangeiros, classificados pelo Programa Qualis da Área de Biodiversidade, referente ao ano 2012, pertencentes às áreas de botânica, oceanografia, zoologia e ecologia. Para a avaliação dos periódicos, definiu-se um plano metodológico composto por duas etapas. A primeira incluiu a análise dos periódicos a partir dos indicadores bibliométricos, realizada a partir da porcentagem captada pela janela de citações de dois anos do Fator de Impacto e do próprio Fator de Impacto no período de 2007 a 2011, utilizando quartis para identificação dos periódicos de maior e menor posição no ranking da área, segundo cada um destes indicadores. A segunda etapa teve como objetivo realizar a análise dos aspectos formais dos periódicos, e considerou: tempo de existência ou duração, pontualidade, periodicidade, quantidade de artigos publicados por ano, porcentagem de artigos de pesquisa, datas de recebimento e aprovação, revisão por pares e idiomas de publicação. Dentre os principais resultados obtidos a partir da análise dos indicadores biblométricos, estão: os periódicos classificados pelo Qualis Biodiversidade apresentam uma baixa média, tanto da porcentagem da janela de citação, como do próprio Fator de Impacto; e 75% dos periódicos BOZE possuem índices abaixo de 20% para a janela de citação de dois anos. A análise dos aspetos formais não revelou diferenças significativas entre os periódicos, porém revelou a necessidade de uma revisão da qualidade dos periódicos classificados nos estratos B3 e B4. Constatou-se que as áreas BOZE apresentam diferenças significativas quanto à dinâmica de citações da produção científica, com destaque para as áreas de ecologia (maior obsolescência da literatura) e zoologia (menor obsolescência da literatura) que demonstraram desempenhos extremos. / Knowing the specifics of scientific communication in biodiversity, through the evaluation of journals that present research results in the area. The study was based on scientific journals, domestic and foreign, sorted by the 2012 Qualis Program for Biodiversity pertaining to the areas of botany, oceanography, zoology and ecology. A two steps method for the evaluation of journals was defined. The first included the analysis of the journals from the bibliometric indicators, carried out based on the citation percentage by quartile in a two year window of citations measuring the variation in impact factors over the years. The second aims to perform the analysis of the formal aspects of the journals, in particular: time of existence or duration, punctuality, frequency, number of articles published per year, percentage of research articles, dates of receipt and approval, review by peers and number of languages it is published in. Among the results of the study, it was found that the areas BOZE significant differences in the dynamics of scientific citations, highlighting the areas of ecology (greater obsolescence of literature) and zoology (lower obsolescence of literature) who demonstrated extreme performances.

O processo de avaliação dos programas de pós-graduação brasileiros foi iniciado pela Capes na década de 1970, consolidando-se com o sistema Qualis, cujo objetivo é classificar os milhares de cursos existentes atualmente no país. Mais especificamente, são nomeadas comissões de área, cujo papel consiste na definição e aplicação de critérios para assegurar o mérito científico dos programas, no que tange à sua proposta, ao seu corpo docente, à titulação de novos mestres e doutores e à publicação da pesquisa em veículos reconhecidos. Como um reflexo do que vem acontecendo mundialmente, o periódico científico se sobressai em relação aos outros tipos de documento, como decorrência de um processo histórico que culminou nas bases de dados, tornando-se a principal fonte de informação para avaliação de produção científica. Esta pesquisa teve como objetivo geral contribuir com o processo de avaliação da produção científica nacional, por meio de análise das fontes de informação que compõem os critérios de classificação dos periódicos utilizados nas áreas de ciências sociais aplicadas. Os objetivos específicos foram: 1) identificar as fontes de informação que podem ser classificadas efetivamente como base de dados, segundo critérios específicos que permitam atestar a qualidade científica e/ou editorial periódico; 2) identificar as fontes de informação que possuem critérios de seleção específicos que permitam atestar a qualidade científica e/ou editorial dos periódicos e os disponibilizam em seus sites; 3) analisar o uso que tem sido feito dessas fontes nas diferentes áreas de avaliação dos programas de pós-graduação. Os resultados permitiram observar que das 17 fontes de informação analisadas somente 7 foram reconhecidas como bases de dados e declaram utilizar critérios de seleção de periódicos. Todas as fontes de informação que não mencionam critério de seleção eram utilizadas pela área de Ciências Sociais Aplicadas I, no triênio de 2007-2009, consistindo de fontes temáticas de Ciência da Informação e Comunicação, que deixaram de figurar entre os critérios da área no documento que os atualiza, publicado em 2012. Entre todas as áreas de avaliação que compõem a grande área de Ciências Sociais Aplicadas destacou-se o uso das bases com cobertura internacional (Web of Science e Scopus) e regional (SciELO, LATINDEX e REDALYC). Outro aspecto importante foi o uso do Fator de Impacto para classificação dos periódicos pelas áreas de Economia e Administração, Ciências Contábeis e Turismo, a partir do triênio de 2004-2006. Por fim, observou-se que, do ponto de vista dos profissionais que atuam nas bases de dados, existe uma percepção mais aguçada dos quesitos sobre a qualidade esperada de um periódico científico. Por outro lado, quem está ligado ao meio editorial e às comissões das áreas não necessariamente percebe os detalhes fundamentais à efetividade da comunicação científica, quais sejam: existência de critérios de seleção de periódicos, presença de um conselho editorial atuante, diversidade geográfica dos autores, revisores ad hoc e membros do conselho editorial e informações sobre a lista de títulos dos periódicos indexados pela fonte de informação. / The evaluation of graduation, by Capes, from 1970s, when it began a process that has been developed since then, resulting in the Qualis, whose goal is to assess thousands of postgraduate programs in Brazil. Specifically, there are trained committees, whose objective is to define and apply the criteria to ensure the scientific merit of the programs in terms of their proposal, its faculty, titration of new teachers and doctors, and the publication of research findings in recognized publishing vehicles. As a reflection of what is happening worldwide, the scientific journal stands in relation to other types of document, because of a historical process which culminated in the databases as the main source of information for evaluation of scientific production. This research aims to contribute to the process of evaluation of national scientific production, through the analysis of information sources that make up the criteria for classification of the scientific journals used in the areas of applied social sciences. The specific objectives were: 1) to identify the sources of information that can be classified effectively as a database, according to specific criteria that allow to test the scientific and/or editorial quality, 2) to identify which information sources have specific selection criteria that allow to test the scientific and/or publishing quality and if they are provided on their websites, and 3) to evaluate the use that has been made of these sources in different areas of assessment. Results showed that, from the 17 sources of information analyzed, only 7 were recognized as databases and were declaring to use criteria for selecting the scientific journals. All sources of information that were not mentioned a selection criteria were used for the area of Applied Social Sciences I in the triennium 2007-2009, consisting of thematic sources of Information Science and Communication, these sources are no longer available among the criteria in the area of the document that updates the criteria of the area, published in 2012. Among all evaluation areas that comprise the large area of applied social sciences, the use of bases with international coverage is the most important (Web of Science and Scopus) and regional (SciELO, LATINDEX and REDALYC) in most areas. Another important aspect was the use of the Impact Factor for the scientific journals classification, the areas of Economics and Business Administration, Accounting and Tourism, since the three-year period from 2004-2006. Finally, it was observed that, from the professional\'s point of view, there is a better perception regarding questions about the criteria that analyzes the expected quality of a scientific journal. On the other hand, who is linked to the editorial and area committees, cannot necessarily perceive the details that are critical to the effectiveness of scientific communication: the existence of periodic selection criteria, the presence of an active editorial board, the existence of a geographic diversity of the authors, ad hoc reviewers and editorial board members and information about the list of titles of the scientific journals indexed by the source of information.