Return to search

RELAÇÃO ENTRE IMPORTÂNCIA E VULNERABILIDADE DE INDICADORES DE PRODUÇÃO CIENTÍFICA / IMPORTANCE AND SUSCEPTIBILITY OF SCIENTIFIC PRODUCTION INDICATORS

The assessment of the scientific output of the proponent is part of the
evaluation of research projects in public research funding agencies, such as the
National Council of Scientific and Technological Development (CNPq). The
standardized Lattes curriculum vitae is the source of information used by the
Advisory Committees to analyze individual scientific production. Standardized
indicators of productivity are used to evaluate the quantity and quality of the scientific
output of a researcher. The increasing demand for research productivity fellowship
(RPF) support without a corresponding increase in research budget revealed an
issue that is the subject of this work. An increasing number of proponents fulfill, or
even exceed, the minimum requirements of productivity indicators for RPF granting.
However, the number of granted researchers does not increase due to budget
restrictions, making the process more competitive. In this study we questioned both
granted and non-granted RPF proponents how they perceived the relative
importance and susceptibility of various indicators of scientific productivity of CV
Lattes. In addition we asked for suggestions of new research productivity indicators
and what should be changed in the current scenario of productivity indicators
extracted from CV Lattes. The proponents demand ethics and integrity in the
evaluation of research projects and that the merit of the research should be taken
into account, in addition to quantitative curriculum information. The proponents
considered the most important indicators the less susceptible to manipulation, such
as publications and grants, but also other indicators, such as national and
international awards. This study revealed a significant difference in the relative
importance and susceptibility attributed to output indicators between RPF status and
gender. Despite the observed differences, a list of consensual most important and
least susceptible indicators was established. The most important and least
susceptible indicators of scientific productivity were: number of M.Sc. and Ph.D.
students advised, number of research projects funded by international research
funding agency as principal investigator, number of research projects funded by
national research funding agency as principal investigator, number of post-docs
advised, number of research projects funded by state research funding agency as
principal investigator, number of articles as corresponding author, number of articles
in indexed journals, international award received, editorial board membership of
indexed international journal, reviewer member of indexed international journal and
speaker of international conference. Women attributed higher scores of importance
to 36 out of 39 variables, and lower scores of susceptibility to 35 out of 39 variables
than men. Though this study involves researchers from the biosciences, its results
and conclusions may change the methodology used to classify scientific productivity
fellowship granting in all areas of knowledge, since it involves the analysis of
scientific productivity between applicants. / A avaliação da produção científica de um pesquisador constitui valor decisivo
no financiamento de projetos de pesquisa com recursos públicos oriundos de
agências de fomento, definindo-se o Conselho Nacional de Desenvolvimento
Científico e Tecnológico CNPq como foco deste estudo. Fundamentado nesse
princípio, o CV Lattes do pesquisador é a fonte de informações pela qual o CNPq,
por meio de seus Comitês de Assessoramento, analisa a produção científica
individual dos proponentes com base em indicadores de produtividade
padronizados. A crescente demanda por apoio a projetos de pesquisa e,
principalmente, por bolsas de produtividade em pesquisa bolsas PQ , sem o
correspondente aumento de recursos públicos necessários para contemplá-las
integralmente, revelaram uma problemática que constitui o objeto de estudo desse
trabalho. Observa-se número cada vez maior de pesquisadores que atendem, e até
mesmo superam, os requisitos mínimos para a concessão de bolsas PQ. Assim,
questionou-se aos pesquisadores das áreas de biociências, tanto bolsistas PQ como
não bolsistas, como eles percebem a importância dos vários indicadores de
produtividade científica do CV Lattes. Da mesma forma, buscou-se a opinião deles
sobre a susceptibilidade destes indicadores à manipulação tendenciosa,
apresentada a eles como sendo o superdimensionamento da produção do
pesquisador com vistas a um benefício em uma análise competitiva entre os pares.
Adicionalmente, foram solicitadas sugestões de novos indicadores e/ou
reformulações dos atuais objetivando assim realizar análise qualitativa dessas
sugestões sobre o que deveria ser modificado no atual cenário de indicadores de
produtividade do CV Lattes. Nesse estudo, hipotetizou-se que a opinião sobre
importância e susceptibilidade dos indicadores de produção científica muda em
função do nível de bolsa PQ do requerente e que os indicadores mais importantes
seriam aqueles considerados menos suscetíveis. Verificou-se que os pesquisadores
demandam ética e integridade na avaliação de projetos de pesquisa e que seja
valorizado o mérito da pesquisa e não apenas a quantificação das informações
curriculares. Os resultados confirmam que os indicadores considerados mais
importantes foram aqueles entendidos como menos suscetíveis à manipulação
tendenciosa, que foram: orientação de mestrado e doutorado, coordenação de
projetos de pesquisa financiados por agência de fomento internacional, coordenação
de projetos de pesquisa financiados por agência de fomento nacional, supervisão de
pós-doutorado, coordenação de projetos de pesquisa financiados por agência de
fomento estadual, artigos publicados como autor correspondente, artigos publicados
em periódicos indexados, prêmio internacional, membro de conselho editorial de
periódico indexado internacional, revisor de periódico internacional e conferencista
internacional. Figuraram entre eles os indicadores tradicionais, como publicações e
orientações, e também indicadores pouco valorizados na avaliação da produção
científica, como prêmios nacionais e internacionais. Mostrou-se que a magnitude de
importância e suscetibilidade atribuída aos indicadores difere entre os bolsistas em
seus diferentes níveis e os não bolsistas. O mesmo foi observado em relação ao
gênero dos pesquisadores. Proponentes do sexo feminino atribuíram escores mais
altos de importância e menores de susceptibilidade à maioria dos indicadores
analisados. Mesmo que o foco deste estudo esteja nas opiniões dos pesquisadores
das áreas de biociências, os resultados têm potencial de alterar a metodologia
utilizada nas avaliações das concorrências para bolsas de produtividade científica,
uma vez que o princípio para concessão de recursos à pesquisa está fundamentado
na análise do mérito científico, geralmente atrelado ao nível de produtividade dos
pesquisadores concorrentes.

Identiferoai:union.ndltd.org:IBICT/oai:repositorio.ufsm.br:1/3550
Date08 October 2015
CreatorsOliveira, Alexandre Rodrigues de
ContributorsMello, Carlos Fernando de, Loreto, Elgion Lucio da Silva, Rocha, João Batista Teixeira da, Teixeira, Maria do Rocio Fontoura, Roos, Daniel Henrique
PublisherUniversidade Federal de Santa Maria, Programa de Pós-Graduação em Educação em Ciências: Química da Vida e Saúde, UFSM, BR, Ciências Biológicas
Source SetsIBICT Brazilian ETDs
LanguagePortuguese
Detected LanguagePortuguese
Typeinfo:eu-repo/semantics/publishedVersion, info:eu-repo/semantics/doctoralThesis
Formatapplication/pdf
Sourcereponame:Repositório Institucional da UFSM, instname:Universidade Federal de Santa Maria, instacron:UFSM
Rightsinfo:eu-repo/semantics/openAccess
Relation200000000006, 400, 300, 300, 500, 300, 300, 300, 82e537b0-4a43-400e-9f82-0cd91952adea, 03639730-0267-471e-96d0-3c0cdf473f1f, 51e64840-2115-48e5-a1ae-149b2103bd04, 287bb0df-2738-40f7-8e03-0d36bf19a982, 5fc5c335-36e5-4f44-8704-7f8f416c068e, be191769-4f1d-4a86-b00a-b572365d457a

Page generated in 0.003 seconds