1. Altmetrics y el impacto en la
producción científica
II Conferencia sobre Bibliotecas Científicas
Acceso Abierto y medición
del impacto de la investigación
Agosto, 2016
Lima, Perú
Libio Huaroto
Dirección de Gestión del Conocimiento
Apoyo a la Producción Intelectual
Universidad Peruana de Ciencias Aplicadas (UPC)
2. Temario
• Estado actual
• Definición
• Revisión de literatura
• Herramientas
• Repositorios Institucionales
• Caso de la Universidad Peruana de
Ciencias Aplicadas - UPC
• Comentarios
3. Estado actual Altmetrics
• Casas editoriales incorporan Altmetrics en revistas,
libros y datos
• Mayor número de Repositorios Institucionales y
Temáticos con Altmetrics
• Incremento de la literatura científica sobre
Altmetrics (WoS, SCOPUS, Scholar Google)
• Agencias de financiamiento apoyan los proyectos
de investigación sobre el impacto de Altmetrics
• Sistemas de descubrimientos incorporan
Altmetrics (Summon – Ex Libris - EDS)
• National Information Standards Organization –
documentos técnicos normativos
6. Indicadores
• Retraso en la evaluación de los
resultados de investigación para
ser publicados en una revista
• De 02 a 05 años para obtener los
factores de impacto
• Posibles manipulaciones en el
recuento de citas
• Exceso de autocitas o citación de
común acuerdo con otros autores
Problemas de los sistema de medición clásicos
Factor de impacto (FI), Índice de inmediatez (II), SCImago Journal Rank (SJR), otros.
7. • “is the creation and study of new metrics based on
the Social Web for analyzing and informing
scholarship (Altmetrics Manifiesto). Altmetrics is a
subdiscipline of scientometrics. Altmetrics typycally
look at individual research output, including journal
articlesor datasets” (Martin Fenner, 2014)
• study and use of scholarly impact measures based
on activity in online tools and environments” (Priem
2010, 2014, p. 266).
Definición 1
Definición Altmetrics
8. • “Altmetrics is a broad term that
encapsulates the digital collection,
creation, and use of multiple forms of
assessment that are derived from activity
and engagement among diverse
stakeholders and scholarly outputs in the
research ecosystem”.
(Altmetrics Definitions and Use Cases, NISO. Marzo
2016)
Definición 2
Definición Altmetrics
9. Historia
2008
• Herramientas
de marcadores
sociales para
el proceso de
revisión por
pares post
publicación
(Dario
Taraborelli,
2008)
2009
• PLOS
Article-Level
Metrics
(Neylon and
Wu 2009)
2010
• Scientometrics
2.0, basado en
Web 2.0 (Priem
and Hemminger,
Julio 2010)
• Estudio sobre la
publicación de
artículos en
blogs (Groth
and Gurney
2010)
• Manifiesto
Altmetrics
(Jason Priem,
Dario
Taraborelli, Paul
Groth and
Cameron
Neylon. Octubre
2010)
2011
• Plum Analytics,
Andrea
Michalek y Mike
Buschman
inician el
proyecto.
• Euan Adie
funda la
empresa
Almetric
2012
• Total impact
(Jason Priem
y Heather
Piwowar).
Mas tarde se
convertiría en
Impac story..
• Elsevier
incluye
Altmetrics en
SCOPUS
2013
• Elsevier
adquiere
Mendeley
• EBSCO
aquiere Plum
Analytics
• Impactstory
anuncia un
nuevo
modelo de
servicio
(suscripción).
2014
10. Altmetrics en números
Figure 1. Research publications indexed in Thomson Reuters Web of ScienceTM that are mentioned at least once in Altmetric data. The
database expanded over the period but the share of mentioned documents has grown faster (data and analysis:
CWTS, University of Leiden).
12. Metricas para Libros
Bookmetrix
http://www.bookmetrix.com/
• Desarrollado por Springer y
Altmetrics (Abril 2015)
• Plataforma que permite
evaluar los libros y capítulos
de libros a través de las
redes sociales.
• Utiliza el ISBN como
identificador para el SCORE
Altmetrics http://www.springer.com/us/ book/9783642248252
Citations Readers
14. Altmetrics – Data Level Metrics
Fuente: http://mdc.lagotto.io/
Proyecto desarrollado en
conjunto por:
• The California Digital
Library (University of
California)
• PLOS
• DataONE
• Financiado por National
Science Foundation (USA)
2014-2015
• Objetivo: rastrear y
medir el uso de los datos
16. NISO – Altmetrics
NISO RP-25-201x-2C
Alternative Outputs in Scholarly Communications
For public review and comment from May 13 – June 11, 2016
NISO RP-25-201x-2A
Alternative Outputs in Scholarly Communications: Data
Metrics
For public review and comment from May 13 – June 11, 2016
NISO RP-25-201x-2B
Persistent Identifiers in Scholarly Communications
For public review and comment from May 13 – June 11, 2016
NISO RP-25-201x-1
Altmetrics Definitions and Use Cases
For public review and comment from March 22 – April 20, 2016
Fuente: NISO, Julio 2016
17. Altmetrics – Sistema de Descubrimientos
Instituto Politécnico y Universidad
Estatal de Virginia (Virginia Tech)
Producto: Summons
18. Altmetrics – Sistema de Descubrimientos
Pontificia Universidad
Católica del Perú (PUCP)
19. Revisión de artículos: Redes sociales
Twitter
Fuente: Holmberg, K., & Thelwall, M. (2014)
20. Fuente: Ehsan Mohammadi, Mike Thelwall, Stefanie Haustein; Vincent Larivière (2015)
Revisión de artículos: Mendeley y WoS
Fuente: Ehsan Mohammadi and Mike Thelwall (2014)
21. Blogs científicos
Fuente: Fausto, S., Machado, F. A., Bento, L. F. J., Iamarino, A., Nahas, T. R., & Munger, D. S. (2012)
19,000 RB posts citados y 26,154 enlaces a los
artículos científicos publicados en 3,350
diferentes revistas.
Figure 4 Research Blogging posts and citations
Figure 8 Relationship between RB Total Views and Citations
http://researchblogging.org/
22. Revisión de artículos: Datos
Fuente: Isabella Peters , Peter Kraker , Elisabeth Lex , Christian Gumpenberger , and Juan Gorraiz (2015)
23. Altmetrics – Caso de estudios
University of Cambrige
University of Manchester
Duke university
24. http://readermeter.org/
ReaderMeter servicio web que rastrea el número de lectores
Mendeley de todos los artículos de un autor en particular. (2010)
Herramientas Altmetrics
https://impactstory.org
Impactstory se inició como “total impact”, desarrollado en el marco
de un evento académico (Hackathon, 2011)
ScienceCard se inicio en Londres, en el marco de un evento
académico en línea (Septiembre, 2011). Actualmente se incorporó
en el buscador de Microsoft Search Engine
http://www.peerevaluation.org
Peer Evaluation, plataforma de acceso libre que permite realizar
procesos de revisión por pares. Permite al investigador visibilizar su
trabajo y medir el impacto de sus investigaciones.
http://www.papercritic.com/
PaperCritic, permite a los investigadores monitorear los comentarios que
recibe su trabajo, asi mismo, evaluar los trabajo de otros colegas, es una
plataforma de acceso abierto.
25. • Se Inicia en Febrero 2012. Euan Adle creador de la
empresa Altmetric.com
• Utiliza identificador para mostrar indicadores (DOI,
Handle, PMID, ArXiv Ids, ORCID)
• Denominación de la herramienta: Altmetric Explorer
• Altmetrics for institutions
• API para implementación
• Credo por Andrea Michale y Mike Buschman (2012)
• EBSCO adquiere los derechos (2014)
• Recopila más de 25 servicios de redes sociales.
• Incluye perfiles de usuarios
• Se implementa en 2009 Altricle Level Metrics (ALM)
por PLOS
• Mide el rendimiento general y alcance de los artículos
de investigación publicados por PLOS
• PLOS cuenta con Altmetrics Collection, es libre (API)
• Open Journal System (OJS) incorpora ALM
Herramientas Altmetrics
26. Altmetrics y Repositorios Institucionales
Ranking web de Repositorios (Webometrics)
incorpora Altmetrics como indicador de
evaluación (Enero, 2014)
Otras Universidades
• University of Pittsburgh ULS (Plum Analytics)
• Cold Spring Harbor Laboratory (Altmetrics Explorer)
• University of Michigan (Altmetr4ics Explorer)
• Universidad Politécnica de Cataluña
• Universidad de Alcalá2
Altmetrics in Institutional Repositories: New
Perspectives for Assessing Research Impact
Salima Rehemtula; Maria de Lurdes Rosa; Paulo
Leitão; Rosario Arquero Avilés
(Libraries in the Digital Age (LIDA) Proceedings
2014)
27. Altmetrics y Repositorios de Tesis (ETD´s)
EXPLORING ALTMETRICS FOR ETDs
Charles J Greenberg; Sangeeta Narang; Sebanti Sengupta
New Delhi, India Nov. 2015 ETD2015
Fuente: Charles J Greenberg; Sangeeta Narang; Sebanti Sengupta (2015)
Fuente: Charles J Greenberg; Sangeeta Narang; Sebanti Sengupta (2015)
28. Altmetrics y Repositorios Institucionales
Repositorio Institucional de la Universidad del
Rosario – Colombia. Plum Analytics (2015)
SciELO Brasil incorpora Altmetrics Explorer (Agosto. 2015)
ALICIA - Consejo Nacional de Ciencia, Tecnología e
Innovación Tecnológica - Plum Analytics (2015)
Repositorio Académico de la Universidad Peruana de
Ciencias Aplicadas (UPC) – Altmetric Explorer (Enero,
2015)
29. • Implementación en Enero 2015
• Utiliza el logotipo “Donuts”
• Versión gratuita (Repositorio
Institucional)
• Visualización a través del metadato de
registro
• Utiliza identificadores para recopilar
información (DOI, Handle, URL, PMID,
otros)
• Presenta una puntuación SCORE
Altmetrics
Altmetrics Explorer
Altmetrics – Repositorio Académico UPC
30. Altmetrics “SCORE”
La puntuación de «Altmetric.com» se calculada
automáticamente, por conteo ponderado en
función de la atención recibida en 3 factores
principales:
1. Volumen. Número de menciones.
2. Fuente. Cada categoría es puntuada de
diferente forma. Por ejemplo puntúa más la
mención en un artículo de prensa que en un
blog.
3. Autores. Puntúa en función de la categoría del
autor que haya hecho la medición, o en que
revista se haya hecho en función de su impacto
o audiencia.
Altmetrics – Repositorio Académico UPC
32. Altmetrics – Repositorio Académico UPC
Fuente: Repositorio Académico UPC (Julio 2016)
En Julio 2016 se identificó actividad
Altmetrics en :
• Casas editoriales
• PLOS, Elsevier
• JAMA
• Biomed Central
• Willey
• Sociedades Científicas
• Society for General
Microbiology
• American Medical Association
(JAMA)
• Instituto Materno Infantil de
Pernambuco
• The American Society of Tropical
Medicine and Hygiene
Trabajos previos (2014-2015) mostraron
mayor actividad en
• Artículos originales, seguido
por cartas al editor, tesis,
reportes, libros y capítulos
de libros.
• Identificador DOI
• Idioma español e inglés
• Los documentos más
actuales
• Mendeley, Twitter y News
outlet
Fuente: Liliana Eléspuru; Libio Huaroto (2014-2015)
33. Altmetrics – Repositorio Académico UPC
https://arxiv.org/abs/1603.07992 Marzo, 2016
n=371
De 371 artículos revisados, 87 presentan
actividad Altmetric
Fuente: Repositorio Académico UPC. Julio 2016
Artículos científicos en la Facultad de Ciencias de la Salud - UPC
34. TOP 100 Articles 2015 Altmetric
Altmetrics – Repositorio Académico UPC
TOP Article Altmetrics Elsevier
https://www.altmetric.com/top100/2015/ http://www.journals.elsevier.com/american-heart-journal/altmetric-articles/
35. Nro Articulos SCORE ALTMETRICS
1
Cannabinoids for Medical Use A Systematic Review and Meta-
analysis
2
Association between Facebook Dependence and Poor Sleep Quality:
A Study in a Sample of Undergraduate Students in Peru
3
Postoperative Complications in Patients with Unrecognized Obesity
Hypoventilation Syndrome Undergoing Elective Non-cardiac Surgery
4
Reducing salt in bread: a quasi-experimental feasibility study in a
bakery in Lima, Peru
5
Is it the creatine or the anabolic androgenic steroids? Need for
assessing the steroids role in testicular cancer
AUTOR :
TOP 05 Artículos - Julio 2016
Fuente: Repositorio Académico UPC (Julio 2016)
Altmetrics – Repositorio Académico UPC
36. Fuente: Web of Science, (Julio 2016)
Altmetrics – Repositorio Académico UPC
Antonio Bernabe-Ortiz
Total artículos = 11
Citas recibidas = 30
Índice H = 3
Citas cada año
Elementos publicados cada año
Adrian Hernandez V.
Total artículos = 37
Citas recibidas = 143
Índice H = 7
Edward Mezones Holguin
Total artículos = 15
Citas recibidas = 66
Índice H = 5
37. Nro Revistas Casa Editorial
1 PLoS ONE Plos
2 Fertility and Sterility Elsevier B.V.
3 Contemporary Clinical Trials Elsevier B.V.
4 International Society for Infectious Diseases Elsevier B.V.
5 Maturitas Elsevier B.V.
6 Journal of the American Medical Association (JAMA) American Medical Association
7 American Journal of Tropical Medicine and Hygiene The American Society of Tropical Medicine and Hygiene
8 Asian Pacific journal of tropical medicine. Elsevier B.V.
9 Thrombosis Research Elsevier B.V.
10 Journal of Medical Microbiology Society for General Microbiology
11 Revista Brasileira de Saúde Materno Infantil Instituto Materno Infantil de Pernambuco
12 BMC Psychiatry Biomed Central Ltd
13 Nucleic Acids Research Oxford University Press
14 Vaccine Elsevier B.V.
15 BMC Pregnancy and Childbirth Biomed Central Ltd
16 Clinical genetics John Wiley & Sons, Inc.
17 The Lancet Elsevier B.V.
18 Travel Medicine and Infectious Disease Elsevier B.V.
19 Microscopy research and technique John Wiley & Sons, Inc.
20 The Scientific World Journal Hindawi Publishing Corporation
21 Blood transfusion Italian Society of Transfusion Medicine and Immunohaematology (SIMTI)
22 Infection control and hospital epidemiology Cambridge University Press
Publicaciones científicas con mayor actividad Altmetrics según Mendeley
Fuente: Repositorio Académico UPC (Julio 2016)
Altmetrics – Repositorio Académico UPC
38. Fuente: Repositorio Académico UPC (Julio 2016)
Altmetrics – Repositorio Académico UPC
So far, Altmetric has seen 667 tweets from 568 users, with an upper bound of 1,299,575 followers
39. • Se requiere de mayores mecanismos para
evidenciar el impacto social de Altmetrics
• Incremento de la literatura sobre el impacto en la
investigación científica.
• Repositorios Institucionales son una vía para
evidenciar el impacto científico y social que sigue
Altmetrics.
• Se requiere de mayores estudios para conocer:
• ¿cómo los usuarios están utilizando las
herramientas de Altmetrics?
• ¿Qué tipo de usuarios además de los
académicos, están utilizando la literatura?
Conclusiones
40. • Eysenbach, G. (2011). Can tweets predict citations? Metrics of social impact based on
Twitter and correlation with traditional metrics of scientific impact. Journal of Medical
Internet Research, 13(4). http://doi.org/10.2196/jmir.2041
• Fausto, S., Machado, F. A., Bento, L. F. J., Iamarino, A., Nahas, T. R., & Munger, D. S.
(2012). Research Blogging: Indexing and Registering the Change in Science 2.0. PLoS
ONE, 7(12). http://doi.org/10.1371/journal.pone.0050109
• Holmberg, K., & Thelwall, M. (2014). Disciplinary differences in Twitter scholarly
communication. Scientometrics, 1–16. http://doi.org/10.1007/s11192-014-1229-3
• McKerlich, R., Ives, C., & McGreal, R. (2013). Measuring use and creation of open
educational resources in higher education. International Review of Research in Open and
Distance Learning, 14(4), 90–103. http://doi.org/10.1002/asi
• McKerlich, R., Ives, C., & McGreal, R. (2013). Measuring use and creation of open
educational resources in higher education. International Review of Research in Open and
Distance Learning, 14(4), 90–103. http://doi.org/10.1002/asi
• Zahedi, Z., Costas, R., & Wouters, P. (2013). How well developed are altmetrics ? A cross-
disciplinary analysis of the presence of, (Haustein 2010), 1–16.
http://doi.org/10.1007/s11192-014-1264-0
• Alonso-arévalo, J. (2016). Altmetrics can not remain a alternative for a long time. Revista
ORL, 7(3), xx–xx. http://doi.org/10.14201/orl201673.14190
Referencias bibliográficas
