Índice-H dos artigos citantes: uma contribuição para a avaliação da produção científica de pesquisadores experientes / H-index of the citing articles: a contribution to the evaluation of scientific production of experienced researchers

RESUMO

INTRODUÇÃO: Há um crescente interesse e necessidade em avaliar a qualidade da produção científica dos pesquisadores. Para tal, as métricas mais importantes são número de citações, número médio de citações por artigo indexado e o índice-H. Contudo, essas métricas apresentam limitações na avaliação do potencial de impacto das publicações de um pesquisador, especialmente dentre aqueles mais produtivos. OBJETIVO: Propor e demonstrar a utilização de uma nova métrica científica - índice-H dos artigos citantes, que permite refinar a discriminação do impacto das publicações de pesquisadores experientes sobre o conhecimento existente em sua área. MÉTODOS: Foram analisados dados da Web of Science de 13 dentre os pesquisadores doutores brasileiros mais produtivos na área de exercício físico e esporte, incluindo número de artigos publicados, número de citações, número médio de citações por artigos, índice-H e o índice-H dos artigos citantes, ou seja, o índice-H obtido a partir da ordenação decrescente dos artigos que citaram artigos publicados pelo pesquisador. Dados de quatro outros pesquisadores - brasileiros e estrangeiros - foram usados como marcos de referência para comparações. RESULTADOS: Os índice-H do pesquisador e o dos artigos citantes são associados (r = 0,92; p > 0,01), porém, quando são analisados os seis pesquisadores mais produtivos, com índices-H acima de 7, a associação entre os dois índices-H desaparece (r = 0,35; p = 0,49). CONCLUSÃO: O índice-H dos artigos citantes pode contribuir para diferenciar a produção científica de pesquisadores com um grande número de artigos publicados. Sugere-se a adoção de sua mensuração pelas agências brasileiras e estrangeiras de fomento e de avaliação da produção científica.

ABSTRACT

BACKGROUND: there has been an increasing interest and need in evaluating the quality of scientific papers written by researchers. Therefore, the most important measurements used are the number of citations, the average number of citations per article published in indexed journals and the H-index. Those bibliometric indicators present, however, limitations when assessing the potential impact of the publications of a given researcher, particularly among the most productive ones. OBJECTIVE: To propose and to demonstrate the use of a new scienciometric strategy - the H-index of the citing articles-, that allow to better discriminate the impact of a given researcher to the body of knowledge in the respective research area. METHODS: Research data - Web of Science - from 13 of the most productive Brazilian PhD researchers in the field of exercise and sport sciences were analyzed, including number of publications, number of citations, average number of citations per article, H-index and the proposed H-index of citing articles (the H-index extracted from the ranking of articles that cited the papers published by a given researcher). Data from four other researchers - Brazilian and foreign - were used as reference for comparisons. RESULTS: The researcher's H-index and the H-index of the citing articles were associated (r=.92; p>.01). However, when the six most productive authors were analyzed with H-index above 7, the association between the two indexes disappears (r=.35; p=.49). CONCLUSIONS: The H-index of the citing articles can be useful to discriminate the scientific production of authors with a high number of published papers. It is suggested that this algorithm should be adopted by Brazilian and foreign financing and scientific production evaluation agencies.