REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas Natanael Vitor Sobral Doutorando em Ciência da Informação Universidade Federal da Bahia
Sobre o palestrante: Natanael Vitor Sobral Bacharel em Gestão da Informação pela Universidade Federal de Pernambuco (UFPE), Especialista em Administração de Marketing pela Faculdade de Ciências Administrativas da Universidade de Pernambuco (FCAP/UPE), Mestre em Ciência da Informação pela UFPE e Doutorando em Ciência da Informação pela Universidade Federal da Bahia. Atualmente é comentarista no quadro Pesquisa e Opinião na Rádio CBN Recife. Tem interesse em estudos métricos da informação e bases de dados científicas. SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Sumário • 1- Desvendando os principais indicadores científicos a partir do Journal Citation Reports (JCR) e Google Scholar. • 2- Redes sociais acadêmicas e as métricas alternativas.
SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Introdução • Na atualidade tem se questionado bastante a suficiência dos periódicos científicos como os únicos veículos de disseminação de artigos científicos. Com o advento das redes sociais acadêmicas, os pesquisadores ganharam a oportunidade de ampliar os meios de divulgação dos seus artigos, obtendo métricas de suas produções que vão além dos indicadores tradicionais fornecidos pelas bases de dados. SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Introdução • Se antes o imperativo da produtividade científica estava pautado no “publicar ou perecer”, hoje os critérios são mais rígidos, e os pesquisadores precisam publicar, propagar e medir para não perecerem, pois sabe-se que o fato do artigo estar publicado no periódico não é suficiente para que se obtenha o alcance desejado.
SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Introdução • Desse modo, este curso pretende refletir sobre as técnicas que vêm sendo utilizadas para que os pesquisadores tornem suas produções mais visíveis, ampliando as possibilidades de socialização da informação científica, e contribuindo para o aumento da performance cientifica individual e institucional. Para isto, entende-se que os indicadores científicos assumem um papel central, sejam eles tradicionais ou alternativos. SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Indicadores Científicos • Silva, Menezes e Pinheiro (2003) definiram os indicadores científicos como indicadores criados para possibilitar a avaliação dos resultados dos investimentos feitos em Ciência em um país ou em uma instituição. Gutiérrez (1998) afirma que os indicadores científicos estão baseados na análise estatística das variáveis que caracterizam o comportamento da produção científica e são utilizados com o propósito de avaliar os processos de geração, propagação, uso e impacto da literatura científica. SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Extraído de Silva, Silva e Santos-Rocha (2013) SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Extraído de Sobral (2015) SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Fonte: Encontros Bibli (2016) SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Profissionalização da Ciência • Com a profissionalização da Ciência e a introdução do conceito de carreira científica, os pesquisadores passaram a ter outras obrigações além de publicar.
• O atual modelo de avaliação da Ciência é cruel com os pesquisadores que não aparecem.
SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Journal Citation Reports • O Journal Citation Reports (JCR), é uma base reconhecida por avaliar periódicos indexados na Web of Science. Apresenta dados quantitativos que apoiam uma revisão sistemática e objetiva das revistas cobrindo as seguintes áreas do conhecimento: Ciências Agrárias, Ciências Biológicas, Ciências Sociais, Ciências Sociais Aplicadas, Ciências Exatas, Ciências da Terra e Engenharias. SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Fator de Impacto Strehl (2005) destaca a relevância do fator de impacto para diversos atores, tais como: • Autores: identificar os periódicos que podem atribuir prestígio ao seu trabalho. • Editores: acompanhar a evolução das medidas de impacto, publicar artigos importantes e alocar recursos das bibliotecas. • Bibliotecários: selecionar títulos de interesse dos cientistas. • Agências de fomento: necessitam avaliar os autores objetivamente para a distribuição dos recursos. SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Fator de Impacto (Vantagens) • Facilidade de compreensão: numero médio de citações recebidos pela revista. • Robustez: variação de um ano para outro não é grande. • Rápida disponibilidade: ISI é ágil na indexação e distribuição. Mugnaini (2006) SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Fator de Impacto (Críticas) Falta de normalização das referências. Não discrimina artigos de revisão. Universo restrito de revistas. FI representa mais a reputação de uma revista do que sua qualidade (taxa de leitura, taxa de assinatura, avaliação pelos leitores). • Só se pode comparar Fator de Impacto de revistas da mesma área. • • • •
Mugnaini (2006) SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Índice h • Parâmetro simples que indica a qualidade de determinado pesquisador baseado no número de artigos publicados em n anos e o número de citações de cada artigo. Portanto determinado cientista tem um índice h, quando possuir h trabalhos com pelo menos h citações. (HIRSCH, J. E.) SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Como calcular? • 1) Ordenar todos os trabalhos de um determinado autor, do 1º ao último do mais citado para o menos citado. • 2) Primeira coluna: ordem crescente pela quantidade de trabalhos. • 3) Segunda coluna: ordem decrescente pela quantidade de citações. (SOARES, 2008) SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
(SOARES, 2008)
Autor com índice h = 44: Tem pelo menos 44 trabalhos com 44 ou mais citações. SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Índice h (Vantagens) • Contextualiza a carreira do autor. • Permite a avaliação de autores ou grupos de autores. • Identificação de tendências de investigação. • Definição de políticas científicas. Soares (2008) SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Índice h (Desvantagens) • Autocitação. • Coautoria. • Não se podem comparar autores de idades diferentes. • Artigo mais citado é camuflado. Soares (2008) SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Índice h (Desvantagens) • Autocitação. • Coautoria. • Não se podem comparar autores de idades diferentes. • Artigo mais citado é camuflado.
Bufrem, Silva e Sobral (2016) SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Métricas Alternativas
SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Fonte: Lin e Fenner (2013) SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Fonte: Lin e Fenner (2013) SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Redes Sociais Acadêmicas e Profiles
SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Google Scholar
https://scholar.google.com.br/ SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Plataforma Lattes
http://lattes.cnpq.br/ SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Redalyc
http://autores.redalyc.org/iniciaAutores.oa SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Researcher ID
http://www.researcherid.com/ SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Orcid
http://orcid.org/ SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Academia.edu
https://www.academia.edu/ SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Research Gate
https://www.researchgate.net/ SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Blogs Científicos
SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Dicas Finais • Conheça bem as redes sociais acadêmicas e os profiles. Algumas atualizam só, outros precisam do seu empenho. • Remova do seu perfil as publicações que não te pertencem. • Assine apenas conteúdos que são do seu interesse nas Redes Sociais Acadêmicas. SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Dicas Finais • Muito cuidado ao compartilhar conteúdo científico em sua redes social convencional. Lembre-se que nem sempre o público destas redes é especializado. Faça uma síntese dos resultados para que mesmo os homo não academicus possam entender. • Nunca deixe sua produção invisível. • Gerencie os registros para que os itens mais relevantes fiquem em destaque. SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Referências ENCONTROS BIBLI: Revista Eletrônica de Biblioteconomia e Ciência da Informação. Florianópolis: Ufsc, 2015. Disponível em: . Acesso em: 01 jan. 2015. FOB/USP, 2008. Palestra. Disponível em: . Acesso em: 28 out. 2010. GUTIERREZ, P. D. Indicadores cientificos: evaluaciones negativas proposiciones positivas. Scientific indicators: negative evaluations positive propositions. Investigacion Bibliotecologica: Archivonomia, Bibliotecologia, e Informacion, Michoacán, v. 12, n. 25, p.1-55, dez. 1998. HIRSCH, J. E. An index to quantify an individual’s scientific research output. Proceedings of the National Academy of Science of United States of America, v. 102, p. 16569‐16572, Nov. 2005.
SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Referências LIN, Jennifer; FENNER, Martin. Altmetrics in evolution: defining and redefining the ontology of article-level metrics. Information Standards Quarterly, v. 25, n. 2, p. 20, 2013. MARQUES, F. O fôlego na berlinda. Disponível em: . Acesso em: 03 nov. 2011.
MUGNAINI, R. Caminhos para a avaliação da produção científica brasileira: impacto nacional versus internacional. São Paulo, 2006. Tese (Doutorado em Ciência da Informação) – ECA/USP. SANZ-CASADO, E. Evoluçāo dos fundamentos epistemológico dos estudos métricos da informaçāo. Laboratory of Metric Studies on Information (LEMI). University Carlos III of Madrid. Spain Research Institute for Higher Education and Science (INAECU). Spain, 2014. Disponível em: . Acesso em: dez. 2014. SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Referências SILVA, E. L. da.; MENEZES, E. M.; PINHEIRO, L. V. Avaliação da produtividade científica dos pesquisadores nas áreas de ciências humanas e sociais aplicadas. Informação & Sociedade, João Pessoa, v. 13, n. 2, p.193-222, jul. 2013. SILVA, Márcia Regina; DOS SANTOS SILVA, Jeane; SANTOS-ROCHA, Ednéia Silva. O profissional da informação como produtor de conhecimentos: análise bibliométrica da produção cientifica de bibliotecários│ The information professional as producer of knowledge: bibliometric analysis of librarians' scientific production. Liinc em Revista, v. 9, n. 1, 2013.
SOARES, S. B. C. Indicadores da produção científica: Fator de impacto e Índice h. In: IV SEMANA INTEGRADA DO LIVRO E DA BIBLIOTECA, 2008, Bauru: FOB/USP, 2008. Palestra. Disponível em: . Acesso em: 28 out. 2010. SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Referências SOBRAL, Natanael Vitor. Alinhamento da produção científica do programa de pós-graduação em medicina tropical da UFPE às necessidades sociais de saúde tropical em Pernambuco: análise cientométrica. 2015. 146 f. Dissertação (Mestrado) - Curso de Ciência da Informação, Programa de Pósgraduação em Ciência da Informação, Universidade Federal de Pernambuco, Recife, 2015. Disponível em: . Acesso em: 01 nov. 2015. STREHL, L. O fator de impacto do ISI e a avaliação da produção científica: aspectos conceituais e metodológicos. Ci. Inf., Brasília, v. 34, n. 1, p.19‐27, jan./abr. 2005.
SOBRAL, Natanael Vitor. REFLEXÕES SOBRE OS INDICADORES DE PRODUÇÃO CIENTÍFICA: Índice h, Fator de Impacto e outras métricas. Recife: Universidade Federal Rural de Pernambuco, 2016.
Emails:
[email protected] [email protected] Academia.edu: ufba.academia.edu/NatanaelVitorSobral Research gate: http://www.researchgate.net/profile/Natanael_Sobral Facebook: Natan Sobral
