Material de soporte al webinar de formación del personal docente e investigador de la Universidad Pablo de Olavide dentro del programa de formación de la Biblioteca/CRAI. Dictado por Ángel M. Delgado Vázquez y Yusnelkis Milanés Guisado los días 21 y 24/9/2021

1. Introducción a la
bibliometría: fundamentos,
fuentes y herramientas
Ángel M. Delgado Vázquez
Yusnelkis Milanés Guisado
Biblioteca/CRAI

2. Programa
Módulo 1: Introducción a la Bibliometría
Módulo 2: Fuentes de datos e indicadores
Módulo 3: Herramientas para visualizar y mapear
campos científicos a través de la Bibliometría
Módulo 4: Práctica a través de estudios de caso

3. Qué es la bibliometría
“La aplicación de métodos
matemáticos y estadísticos a
libros y otros medios de
comunicación” Pritchard, 1969

4. Qué es la bibliometría
Adaptado de Björneborn, Lennart, yPeter Ingwersen. «Toward a Basic Framework for Webometrics». Journal of the American Society for Information Science and Technology, vol. 55,
n.o 14, diciembre de 2004, pp. 1216-27. DOI.org (Crossref), https://doi.org/10.1002/asi.20077.

5. Fundamentos
PRICE: El conocimientocientíficocrece de manera exponencial
LOTKA: Un número reducido de autores produce la mayor parte del conocimiento
científico
BRADFORD: Un número reducido de revistas contiene el core del conocimiento
científico de una disciplina

6. Bibliometría descriptiva
Utilizada, sobre todo, a nivel macro
Para conocer el comportamiento de disciplinas,
líneas temáticas, países, instituciones…
Utilizando, aunque no solo, la contabilidad de
publicaciones
Entendidas estas como el máximo exponente de la
productividad científica

7. Exponential growth of scientific output from 1980 to 2012
Fuente: BORNMANN, L. y MUTZ, R., Growth rates of modern science:A bibliometric analysisbased on the number of publicationsand cited references, Journal of the
Association for Information Scienceand Technology. Volume 66, Issue11,pages 2215–2222, November 2015
La producción científica mundial se duplica cada nueve años.
La tasa real de crecimiento entre un 8-9 % cada año.

8. Bibliometría descriptiva
Nº Total documentos (se consideran todas las
tipologías)
Nº Total documentos citables (artículos, revisiones,
cartas)
Nº de documentos por investigador
Nº de documentos según posición firma del
investigador (inicial, final, correspondencia,…)
Índice de Especialización Temática
Índice de Actividad temática

9. Bibliometría descriptiva
Utilizando los metadatos se pueden mapear
campos científicos, líneas temáticas, etc.

10. Bibliometría descriptiva
Mediante el uso de las citas y las referencias
bibliográficas se puede conocer las relaciones entre
documentos, y también entre autores.

11. Bibliometría descriptiva
Photograph ofEugeneGarfield, recipient ofthe2007
Richard J.BolteSr. Award,atHeritage Day,May 9, 2007,at
the Chemical HeritageFoundation. ScienceHistoryInstitute

12. Bibliometría ¿descriptiva?

13. Bibliometría ¿descriptiva?

14. Bibliometría evaluativa

15. Bibliometría evaluativa
https://www.boe.es/boe/dias/2018/11/26/pdfs/BOE-A-2018-16138.pdf

16. Bibliometría evaluativa
http://www.aneca.es/content/download/13782/171461/file/CRITERIOS_SOCIALES_JURIDICAS.pdf

17. Bibliometría evaluativa

18. Bibliometría evaluativa

19. ¿Porqué no es representativo el IF ?
Impacto de una revista
≠
Impacto de un artículo

20. Indicadores bibliométricos
● No es representativo del índice de citación de los
artículos
● Es variable según la disciplina científica
● Es sensible al número y el tipo de trabajos de las
revistas
● Puede manipularse por parte de los editores
● Existe un problema con las autocitas
● La ventana de citación de dos años a veces no es
suficiente
Algunas de las limitaciones del Factor de
Impacto

22. Bibliometría evaluativa
Con el fin de conocer no solo la productividad, sino
también el desempeño de los actores evaluados
• Nº o % de documentos por cuartil (o
bien decil y tercil)
• Número y Promedio de citas
• Top10, Top 1
• Citas normalizadas: Crown Indicator*
• Índice H y derivados

23. Indicadores bibliométricos
Número y promedio de citas

24. Impacto normalizado
Indicadores de Impacto normalizado
• Obtener un valorque permita realizarcomparativas entre individuos,
institucioneso áreas de investigación..
• Diferencias disciplinares

25. Son adecuadospara:
• monitorizar, contextualizary comparar el impacto de nuestro currículum y
artículos científicos.
• analizarla trayectoriade un grupo de investigación…
¿Para qué podemos utilizarlo?
Impacto normalizado

26. Torres-Salinas (2021). Indicadores de impacto normalizado: origen, cálculo, limitaciones y aplicaciones a la política científica . URL:
https://github.com/torressalinas/repositorio-de-guiones/wiki/Indicadores-de-impacto-normalizado:-origen,-c%C3%A1lculo,-limitaciones-y-aplicaciones-a-la-
pol%C3%ADtica-cient%C3%ADfica
).
•A nivel individual:
• Para tener un indicadorde nuestra carrera investigadoraque contextualiza
nuestro impacto,es un complementoperfecto para indicadorescomo el
índice H.
• Útil por tanto en convocatoriasaltamentecompetitivascomo Ramón y
Cajal,I3.
• Puede ser de utilidadpara cuandotengamos que redactarnuestro
resumen en lasdiferentes acreditaciones,plazas, etc, etc, etc
¿Para qué podemos utilizarlo?
Impacto normalizado

27. Torres-Salinas (2021). Indicadores de impacto normalizado: origen, cálculo, limitaciones y aplicaciones a la política científica . URL:
https://github.com/torressalinas/repositorio-de-guiones/wiki/Indicadores-de-impacto-normalizado:-origen,-c%C3%A1lculo,-limitaciones-y-aplicaciones-a-la-
pol%C3%ADtica-cient%C3%ADfica
).
•A nivel de publicaciones:
• es un indiciode calidadconsistente y convincente(siempre que sea
positivoclaro) para incluirloen las convocatoria desexenios de
investigación;
• o bien en los indiciosde las acreditaciones
¿Para qué podemos utilizarlo?
Impacto normalizado

28. Torres-Salinas (2021). Indicadores de impacto normalizado: origen, cálculo, limitaciones y aplicaciones a la política científica . URL:
https://github.com/torressalinas/repositorio-de-guiones/wiki/Indicadores-de-impacto-normalizado:-origen,-c%C3%A1lculo,-limitaciones-y-aplicaciones-a-la-
pol%C3%ADtica-cient%C3%ADfica
).
Impacto normalizado

29. Citaciónnormalizada(CROWN):Si el valor es mayor de 1, la citaciónestápor encimade la mediamundial
Citación normalizada (CROWN)
Milanes, Y. (2016).Huella científica de las instituciones andaluzas en investigación en VIH/SIDA: Estudio retrospectivo a partir de sus publicaciones científicas.
10.13140/RG.2.2.22362.13764
Impacto normalizado

30. Índice H…
Índice H …
Es un sistema de medición de la calidad profesional de los científicos
propuesto por Jorge Hirsch (2005) de la Universidad de California, basado
en el conjunto de los trabajos más citados de un investigador y en el
número de citas de cada uno de estos trabajos.

31. Indice H: ejemplo.
Número de orden Artículo Citasrecibidas
1 Artículo A 200
2 Artículo B 121
3 Artículo C 68
4 Artículo D 32
5 Artículo E 15
6 Artículo F 4
Índice h = 5
• Significa que de todoslos trabajosque el autorha publicado,al menos 5 de ellosha
recibido como mínimo 5 citas.
• Un investigadorcon 20 artículosy un mínimo de 20 citas, tiene el mismo Indice h
que uno que ha publicado200 artículoscon un mínimo de 20 citas.
Índice H…

32. Índice H:
Es importante tener en cuenta:
EDAD ACADÉMICA
• Años desde la tesis
• Enfermedades
• Género
Índice H…

33. • Nº o % de documentos en colaboración internacional *
• Nº o % de documentos en colaboración con la Industria
Indicadores de colaboración científica
Índice H…

34. Indicadores de colaboración científica
Fuente: INCITES Periodo: 2015_2020

35. Indicadores de colaboración científica
Fuente:Dimentions+ VOsViwer

36. Fuentes bibliométricas
Índices
de
citas
Tradicionales
Web of Science
Scopus
Abiertos-Online
Google Scholar
Dimensions
Dialnet
Métricas

37. Factores
de
Impacto
Internacionales
Journal Citation Reports
Scimago Journal Rank
Nacionales Familia Inrecs
Indicadores bibliométricos
Dialnet Métricas

38. Fuentes y plataformas para la evaluación científica y la gestión
LIVE SESSION!

39. Hacia el cambio en el uso de la bibliometría

43. Article Level Metrics (ALM)

44. Métricas alternativas (ALTMétricas)
Daniel Torres-Salinas, & Juan Gorraiz. (2019, November 27). Nuevas métricas para la Ciencia en la Red. Zenodo. https://doi.org/10.5281/zenodo.3555341

45. Métricas alternativas (ALTMétricas)
…nuevos medios de comunicación de la
ciencia

46. Métricas alternativas (ALTMétricas)
…que generan nuevas estadísticas
Daniel Torres-Salinas, & Juan Gorraiz. (2019, November 27). Nuevas métricas para la Ciencia en la Red. Zenodo. https://doi.org/10.5281/zenodo.3555341

47. Métricas alternativas (ALTMétricas)

48. Métricas alternativas (ALTMétricas)
Taxonomía de Indicadores

49. Métricas alternativas (ALTMétricas)

50. Métricas alternativas (altmétrics)

51. Métricas alternativas (ALTMétricas)
Cobertura desigual de las fuentes

52. Herramientas

53. Mapeo de la ciencia
Dos grandes campos en la Bibliometría
Análisis del Rendimiento científico
Mapeo de la ciencia (Science Mapping Analysis _
SMA)

54. Mapeo de la ciencia
“SMA lies on the topological and
temporal representation of the
cognitive and social structure of a
particular research field…” (Small,
1999; Cobo; López-Herrera; Herrera-
Viedma; Herrera, 2011)

55. Mapeo de la ciencia
¿Qué es un mapa de la ciencia?
Es una representación espacial de cómo las
disciplinas, especialidades y documentos
publicados individuales o autores están
relacionados uno con otro (Small, 1999)
Se focaliza en monitorear un campo científico y
delimitar áreas de investigación para determinar su
estructura cognitiva y su evolución (Noyons, Moed,
& van Raan, 1999)

56. Mapeo de la ciencia
Objeto
Identificar la estructura intelectual
Cambios científicos
Frentes de investigación
Nichos
Colegios invisibles
Análisis de un dominio científico

57. Mapeo de la ciencia
Chen, Chaomei. "Science Mapping: A Systematic Review of the Literature" Journal of Data and
Information Science, vol.2, no.2, 2017, pp.1-40. https://doi.org/10.1515/jdis-2017-0006

58. Mapeo de la ciencia
Identificar la base intelectual

59. Mapeo de la ciencia
Los documentos más influyentes.
SharifiA. Urban Resilience Assessment: Mapping Know ledge Structure and Trends. Sustainability.
2020; 12(15):5918. https://doi.org/10.3390/su12155918

60. Mapeo de la ciencia
SharifiA. Urban Resilience Assessment: Mapping Know ledge Structure and Trends. Sustainability.
2020; 12(15):5918. https://doi.org/10.3390/su12155918

61. Mapeo de la ciencia
Evolución temática de una disciplina

62. Redes temáticas.Evolución de un campo
disciplinar(VIH/SIDA)
1999_2010 2011_2017
Milanes, Y. (2016).Huella científica de las instituciones andaluzasen investigación en VIH/SIDA: Estudio retrospectivo a partir de sus publicaciones científicas.
10.13140/RG.2.2.22362.13764
Mapeo de la ciencia

63. Redes de autores.
Mapeo de la ciencia

64. • Ejemplo de un tipo de
análisis estratégico
• Posible copia de
tecnología
Mapeo de la ciencia

65. Flujo de trabajo
M.J. Cobo, A.G. López-Herrera, E. Herrera-Viedma and F. Herrera, SciMAT: A new Science Mapping Analysis
Software Tool. Journal of the American Society for Information Science and Technology, 63:8 (2012) 1609-1630
doi: 10.1002/asi.22688.

66. Herramientas

67. Clasificación
Moral-Muñoz,JoséA.;Herrera-Viedma, Enrique;Santisteban-Espejo,Antonio;Cobo,ManuelJ.(2020). “Software toolsfor
conducting bibliometricanalysis inscience: An up-to-datereview”.Elprofesionaldela información,v.29, n. 1,
e290103.https://doi.org/10.3145/epi.2020.ene.03
Bases de datos para la descarga de datos
bibliográficos
Software bibliométricos de propósito
general, o basados en índices y análisis del
rendimiento
Herramientas orientadas al mapeo (SMA
tools)
Librerías R y Python .

68. Bases de datos bibliométricos
Moral-Muñoz, José A.; Herrera-Viedma, Enrique; Santisteban-Espejo, Antonio; Cobo, Manuel J. (2020). “Sof-tware tools for conducting bibliometric analysis in
science:An up-to-date review”. El profesional de la informa-ción, v. 29, n. 1, e290103.https://doi.org/10.3145/epi.2020.ene.03
¿Cuáles son las principales bases de datos
para uso bibliométrico ?
¿Cuál (s) se ajusta mejor a mi área de
investigación ?

69. Representatividad científica
Martín-Martín, A., Orduna-Malea, E., Thelwall, M., Delgado López-Cózar, E. (2018).Google Scholar, Web of
Science, and Scopus: A systematic comparison of citations in 252 subject categories. Journal of Informetrics,
12(4), 1160-1177.

70. Representatividad científica
Ciencias Sociales poca representación en WoS,
con alta influencia de la lengua inglesa
Scopus, mayor cobertura que WoS
Google Scholar, mejor cobertura pero sesgos
aún remarcables

71. Dimentions
Supported by Digital Science & Research Solutions
Inc.
Acceso a:
• Documentos tradicionales (articulos, conference
paper, books, etc)
• Grants
• Patents
• Clinical trials,
• Datasets
• Policy papers

72. Herramientas Mapeo de la ciencia
Herramientas de software para realizar
análisis bibliométricos de mapeo de la
ciencia
Moral-Muñoz, José A.; Herrera-Viedma, Enrique; Santisteban-Espejo, Antonio; Cobo, Manuel J. (2020). “Sof-tware tools for conducting bibliometric analysis in
science: An up-to-date review”. El profesional de la informa-ción, v. 29, n. 1, e290103.https://doi.org/10.3145/epi.2020.ene.03

73. Vosviewer
Variedad de fuentes
Altas característicasde
visualización

74. Vosviewer

75. Vosviewer

76. Vosviewer
Red de co-autoría de un investigador
(Medida: Análisis de co-autoría)

77. Vosviewer

78. Vosviewer
Usa un Tesaurosi
es necesario
normalizar
términos

79. Redes temáticas. Evolución de un campo disciplinar (VIH/SIDA)
medida: Análisis de co-ocurrencia de palabras
1999_2010 2011_2017
Milanes, Y. (2016).Huella científica de las instituciones andaluzasen investigación en VIH/SIDA: Estudio retrospectivo a partir de sus publicaciones científicas.
10.13140/RG.2.2.22362.13764
Vosviewer

80. Dimentions + Vosviewer
https://app.dimensions.ai/analytics/publication

81. SciMAT
• Desarrollado por Secaba Lab at
University of Granada(Spain)
• Open-source (GPLv3) SMA software tool
• SMA workflow
• SciMAT incluye pre-procesamientode
datos
• Análisis profundode la evolución de
campos científicos
M.J. Cobo, A.G. López-Herrera, E. Herrera-Viedma and F. Herrera, SciMAT: A new Science Mapping Analysis Software
Tool. Journal of the American Society for Information Science and Technology, 63:8 (2012) 1609-1630
doi: 10.1002/asi.22688

82. SciMAT

83. SciMAT

84. SciMAT
Temas
periféricos
Temas
emergenteso
en declive
Temas motor
Temas
básicos o
transversales

85. SciMAT
Fernández-González JM, Díaz-López C,Martín-Pascual J, Zamorano M. Recycling Organic Fraction of Municipal Solid Waste:Systematic Literature
Review and Bibliometric Analysis ofResearch Trends.Sustainability.2020;12(11):4798.https://doi.org/10.3390/su12114798

86. Bibliometrix /Biblioshiny

87. Bibliometrix /Biblioshiny
Moral-Muñoz,JoséA.;Herrera-Viedma, Enrique;Santisteban-Espejo,Antonio;Cobo,ManuelJ.(2020). “Sof-twaretoolsfor
conducting bibliometricanalysis in science: An up-to-datereview”.Elprofesionaldela informa-ción,v.29, n.1,
e290103.https://doi.org/10.3145/epi.2020.ene.03

88. Bibliometrix /Biblioshiny
Silva-Díaz, F., Vázquez-Vílchez,M.y Carrillo-Rosúa,J.(2020). Estudio bibliométrico sobrela producción científica
en Realidad VirtualInmersiva,Aumentada y Mixta asociadasa un enfoqueSTEMdeenseñanza.En J.A.Marín-
Marín,G. Gómez-García,M.Ramos-Navasy M.N.Campos-Soto,Inclusión,Tecnología y Sociedad:investigación
e innovación en educación (pp.1205-1216). Madrid:Dykinson
Red de co-citaciones por eje temático. Obtenida desde el software Bibliometrix a
partir de los datos recogidosde la base de datos Scopus.

89. Usos de casos de las herramientas
Librerías
Moral-Muñoz, José A.; Herrera-Viedma, Enrique; Santisteban-Espejo, Antonio; Cobo, Manuel J. (2020). “Sof-tware tools for conducting bibliometric analysis in
science:An up-to-date review”. El profesional de la informa-ción, v. 29, n. 1, e290103.https://doi.org/10.3145/epi.2020.ene.03

90. Comparativa: Fuentes de datos

91. Comparativa: Pre-procesamiento de datos

92. Usos de casos de las herramientas
¿Cuál es la mejor?
Todas tienes ventajas y desventajas
Las más usadas en la literatura: Vosviewer,
SciMAT, Bibliometrics/Biblioshiny y CiteSpace
Bibliometrics/Biblioshiny considerada una de
las más completas (Moral-Muñoz et al., 2020)

93. Fuentes y plataformas para la evaluación científica y la gestión
LIVE SESSION!

94. Materiales
Web of Science (WOS) 2021
Scopus
InCites
SciVal

95. Descargas
Voswiever
Scimat
Biblioshiny-Bibliometrix

96. Referencias
Chen, Chaomei(2017) Science Mapping: A Systematic Review of the Literature. Journalof Data
and Information Science, vol.2, no.2, 2017, pp.1-40. https://doi.org/10.1515/jdis-2017-0006
Cobo, M.J., López-Herrera, A.G., Herrera-Viedma, E. and Herrera, F. (2012) SciMAT: A
new ScienceMapping Analysis Software Tool. Journalof the American Society for Information Scienceand
Technology, 63:8 (2012) 1609-1630 doi: 10.1002/asi.22688.
Moral-Muñoz, J. A., Herrera-Viedma, E., Santisteban-Espejo, A., Cobo, M. J. (2020).
Software toolsfor conducting bibliometric analysisin science: An up-to-date review” Elprofesionalde la
información, v. 29, n. 1, e290103.https://doi.org/10.3145/epi.2020.ene.03
Torres-Salinas(2021).Indicadoresde impacto normalizado: origen, cálculo, limitacionesy aplicacionesa la
política científica . URL: https://github.com/torressalinas/repositorio-de-guiones/wiki/Indicadores-de-
impacto-normalizado:-origen,-c%C3%A1lculo,-limitaciones-y-aplicaciones-a-la-pol%C3%ADtica-
cient%C3%ADfica