Indicadores Bibliométricos · Métricas alternativas . Porquê um manifesto? òthe reason it's a...
Transcript of Indicadores Bibliométricos · Métricas alternativas . Porquê um manifesto? òthe reason it's a...
Indicadores Bibliométricos -Webinar-
Indicadores Bibliométricos
Os investigadores e a publicação científica
A contagem de citações
Na avaliação de investigadores Ferramentas para a contagem de citações
A importância da identificação de autoria
Índices de revistas Factor de Impacto
Scimago Journal Rank Indicator
Métricas alternativas
Conceito, indicadores
Os investigadores e a publicação científica
Novas formas de publicação dos resultados científicos, crescente diversidade de fontes, redundância
Acesso aberto e repositórios institucionais: maior visibilidade e impacto
Os investigadores e as instituições necessitam cada vez mais de filtros e métricas que permitam aferir o impacto do seu trabalho
As métricas baseadas na contagem de citações têm sido o meio mais usado pela comunidade científica
Contagem de citações
• Número de vezes que um artigo é citado por outros artigos científicos.
• Métrica fundamental para a avaliação da publicação científica e
para a aferição do prestígio dos investigadores. • Considera-se que se um artigo foi citado muitas vezes será um
artigo de qualidade científica e de referência
Contagem de citações
Baseia-se na natureza cumulativa da ciência, conceito sedimentado na década de 70 do século 20 : ‘‘If I have seen a little further it is by standing on ye shoulders of Giants’’
Newton
Contagem de citações
Meio mais usado para a avaliação de publicações científicas e de investigadores, sendo a base de
cálculo para a maioria dos indicadores bibliométricos.
Contagem de citações
Aspetos a ter em conta: • a abrangência das diferentes bases de dados varia, o que resulta em
diferentes valores para o mesmo artigo, em bases de dados distintas (por exemplo na SCOPUS são contadas as citações a partir de 1996.)
• é fundamental que a indicação da referência bibliográfica na lista de fontes
dos artigos esteja correta: é frequente surgirem gralhas nas listas de bibliografia, o que faz com que essas referências não sejam contabilizadas.
Contagem de citações
Para avaliação de investigadores
Ferramentas para a contagem de
citações
Ferramentas para a contagem de citações
As principais bases de dados disponíveis para a contagem de citações são: 1. Web of Science - http://isiknowledge.com/WOS 2. SCOPUS - http://www.scopus.com/ 3. Google Scholar - http://scholar.google.com
Ferramentas para a contagem de citações
Web of Science
http://isiknowledge.com/WOS Coleção Principal da Web of Science: Science Citation Index Expanded (SCI-EXPANDED) --1900-presente Social Sciences Citation Index (SSCI) --1956-presente Arts & Humanities Citation Index (A&HCI) --1975-presente Conference Proceedings Citation Index - Science (CPCI-S) --1990-presente Conference Proceedings Citation Index - Social Science & Humanities (CPCI-SSH) --1990-presente Índices químicos Current Chemical Reactions (CCR-EXPANDED) --1986-presente Index Chemicus (IC) --1993-presente
Web of Science
Ferramenta que inclui um conjunto de funcionalidades ligadas à análise, relatórios e contagem de citações: • Dados de citações por artigo, através da opção “Times
Cited” • Relatórios de citação “Create citation report” • Citation Maps, disponível após a realização de uma pesquisa
e seleção de um registo da lista de resultados http://wokinfo.com/products_tools/multidisciplinary/webofscience/citmap/
Web of Science
Opção “author search”: • Ajuda na identificação correta da autoria de forma a obter dados de
contagem de citações ajustados. • Permite a localização de artigos de um determinado autor mediante
uma pesquisa guiada, que passa pela seleção de possíveis variantes do nome e pela escolha das áreas temáticas a que o autor está ligado. Integração com o Researcher ID – opção “I wrote these publications” da lista de resultados.
Web of Science
Web of Science
SCOPUS
SCOPUS
http://www.scopus.com/ Trata-se de uma das bases de dados de artigos científicos internacionais mais abrangentes, disponibilizada a partir de 2004.
SCOPUS
Opção Author ID • Ajuda na identificação correta da autoria de forma a obter
dados de contagem de citações ajustados.
• Permite a pesquisa por autor de uma forma inequívoca já
que determina quais as formas de nome que devem ser agrupadas sob uma identificação de autor única. Esta funcionalidade baseia-se num algoritmo que liga formas de nomes baseados em dados como a afiliação, endereço, área de investigação, datas de publicação.
SCOPUS
Opções: “Citation Overview”, onde é possível ver o número de citações por artigo e consultar indicadores como o h-index. Mais informação: http://www.elsevier.com/online-tools/scopus/videos
Google Scholar
http://scholar.google.com - Funcionalidade“Cited By” - permite a consulta das citações
que determinado documento recebeu.
- A metodologia de contagem de citações do Google Scholar
inclui documentos publicados na Web de uma diversidade de fontes, podendo estar incluídas bases de dados ou plataformas com publicações não científicas.
Mais informação: http://scholar.google.com/intl/en/scholar/citations.html
Identificação de autoria
Identificação de autoria
Ambiguidade na identificação de autoria
Problema comum na pesquisa em bases de dados e ao nível dos resultados da contagem de citações
Identificação de autoria
Só através da associação de dados de citação com a identificação inequívoca dos autores dos artigos se torna possível a criação de perfis e cálculos bibliométricos como o h-index e outros.
Identificação de autoria
Ferramentas/serviços para a identificação de autoria:
•Nas bases de dados SCOPUS e Web of Science: mecanismos de controlo próprios;
•Globais:
•ORCID - http://orcid.org/ •Google Scholar Citations - http://scholar.google.com/intl/en/scholar/citations.html
Índices de revistas
Criado por Eugene Garfield, fundador do ISI – Institute of Scientific Information, num artigo de 1955 publicado na revista Science. Inicialmente usado apenas para determinar que publicações incluir no Science Citation Index (Web of Science). Tornou-se o indicador bibliométrico mais usado internacionalmente.
Fator de impacto
Fator de impacto medida de frequência com que o “artigo médio”
de uma revista foi citado.
divisão do número de citações correntes a artigos publicados nos últimos dois anos pelo
número total de artigos publicados nesse mesmo período.
Fator de impacto
Consulta no Journal of Citation Reports (THOMSON REUTERS)
http://webofknowledge.com/JCR
Atualizado todos os anos, em meados do ano civil.
Baseia-se nos dados de citação da Web of Science – THOMSON REUTERS
Fator de impacto
Consulta no Journal of Citation Reports (THOMSON REUTERS) http://webofknowledge.com/JCR
Baseia-se número de vezes que os artigos publicados numa revista nos cinco anos anteriores foram citados no ano mais recente, levando também em consideração o prestígio da revista.
Não contabiliza as auto-citações (mesma revista)
EigenFactor Score
Consulta no SCImago Journal Rank http://www.scimagojr.com/ e SCOPUS http://www.scopus.com
Grupo de investigação de topo na área da bibliometria
do CSIC – “Consejo Superior de Investigaciones Científicas (CSIC)” das Universidades de Granada, Estremadura, Carlos III (Madrid) e Alcalá de Henares - http://www.scimago.es/
Inclui indicadores científicos relativos a revistas e países, com dados retirados da base de dados de artigos científicos Scopus
SCImago Journal Rank Indicator
SCImago Journal Rank (SJR) indicator - desenvolvido pelo grupo SCImago, baseado no algoritmo Google PageRank
Este indicador consiste numa medida de visibilidade das revistas científicas (dados a partir de 1996) - "journal prestige“
Mede a “influência científica” média dos artigos de uma revista
SCImago Journal Rank Indicator
Baseia-se na ideia de que ‘all citations are not create equal’ - a área temática, qualidade e reputação científica de uma revista têm um efeito direto nas citações que são feitas
“A major difference is that instead of each citation being counted as one, as with the Impact Factor, the SCImago Journal Rank assigns each citation a value greater or less than one based on the rank of the citing journal”
SCImago Journal Rank Indicator
Expressa o número médio de citações “positivas” recebidas no ano selecionado pelos artigos de uma dada revista.
“The Scimago Journal Rank (SJR) is based on the transfer of prestige from a journal to another one; such prestige is tranfered through the references that a journal do to the rest of the journals and to itself.”
SCImago Journal Rank Indicator
Limita o efeito das auto-citações a 33%:
“It restricts a journal's self-citation to a maximum of 33% of its
issued references, so that excessive self-citation will not involve artificially inflating a journal's value, but without
touching the normal process of self-citation”.
SCImago Journal Rank Indicator
Métricas alternativas
Novas formas de publicação dos resultados científicos, crescente diversidade de fontes, redundância.
Ampliação do ciclo de difusão do conhecimento científico
Acesso aberto e repositórios institucionais: maior visibilidade e impacto.
Métricas alternativas
as métricas baseadas em contagem de citações são insuficientes para avaliar o
impacto de uma publicação no meio académico.
Métricas alternativas
… a 1ª citação a um artigo pode levar anos…
… artigos de relevância para o avanço do conhecimento podem nunca vir a ser citados…
… a contagem de citações não tem em conta o impacto fora do circuito científico e académico…
Métricas alternativas
A web social e colaborativa permite aos investigadores a disseminação e gestão de informação em novas ferramentas. Esta atividade pode e deve ser medida e fornecer informação adicional.
…as métricas tradicionais, baseadas em citações, não contemplam a outra audiência: os que lêem mas não citam; são úteis mas insuficientes para avaliar o impacto de um artigo.
Métricas alternativas
Discussão, necessidade de mudança?
Novos meios de aferir o impacto de artigos – as métricas alternativas…
Métricas alternativas
Publicações (artigo)
≠ Resultados científicos
Métricas alternativas
Para além da publicação científica “tradicional”, centrada no artigo científico, são hoje consideradas tipologias de
resultados científicos: •Datasets •Software científico •Livros e capítulos de livro •Posters e apresentações em conferências •Teses de mestrado e doutoramento •Performances (teatro, música e cinema) •Blog posts •Aulas e outras atividades docentes
http://altmetrics.org/manifesto/
“is the creation and study of new metrics based on the Social Web for analyzing, and informing scholarship.”
J. Priem, D. Taraborelli, P. Groth, C. Neylon (2010), Altmetrics: A manifesto, (v.1.0), 26 October 2010. http://altmetrics.org/manifesto
Métricas alternativas
Porquê um manifesto? “the reason it's a manifesto, rather than a mission or vision statement, is
arguably because changing the way scholarly impact is measured is going to need something of a revolution – and no revolution is
complete without a manifesto.” Twitter, peer review and altmetrics: the future of research impact assessment Posted by Eliza Anyangwe http://www.theguardian.com/higher-education-network/blog/2012/sep/19/peer-review-research-impact-altmetrics
Métricas alternativas
IMPACTO
CIENTÍFICO ACADÉMICO
Journal Impact Factor Contagem de citações
IMPACTO SOCIAL
Contagem de downloads e
visualizações, menções e referências nas redes
sociais, blogues, gestores de bibliografia
Métricas tradicionais Altmetrics
Métricas alternativas
Retirado da apresentação de Stephan Buettgen da Ebsco Diagram from Ian Mulvany, eLIfe: https://twitter.com/IanMulvany/status/425006889949495296
Métricas alternativas
…não existe uma solução perfeita.
Os vários indicadores podem e devem ser usados de forma complementar…
...é importante a informação generalizada sobre o assunto,
bem como uma atualização constante por parte dos investigadores, instituições de I&D e entidades financiadoras
da investigação.
Métricas alternativas
redundância nos pontos de acesso
Obrigada Diana Silva
- Bibliotecas da Universidade de Aveiro - - Grupo de Trabalho Bibliotecas
de Ensino Superior (GT-BES) BAD-
Imagens: MorgueFile (http://www.morguefile.com/) e Universidade de Aveiro