Conferencia magistral dictada en la Clausura del 5to. Ciclo del Seminario Permanente de Editores Ciudad Universitaria, Universidad Nacional Autónoma de México 19 de junio de 2019

1. El lector de revistas de acceso abierto en el marco del
movimiento de la ciencia abierta
¿a quién estamos abiertos y quién nos abre?
Cristóbal Urbano
Universitat de Barcelona
Facultat de Biblioteconomia i Documentació
Cierre del 5º Ciclo del Seminario Permanente de Editores
Ciudad Universitaria UNAM, Ciudad de México
19 de junio 2019

3. https://youtu.be/4hOIofaTlPg

4. 4
¿Vengo bien vestido y
equipado para una
“Conferencia Magistral”?

5. 5

6. 6
Manos a la obra...
es hora de “hacer adobes” open science style
https://cos.io/rr/
Etapa 0:
Ciencia
participativa,
ciudadana,
contando con los
agentes
implicados

7. 7
Manos a la obra...
es hora de “hacer adobes” open science style
Durante esta charla NO-MAGISTRAL ustedes van a tener que situarse como:
• comunidad estudiada en la etapa 0 (y siguientes)
• como editores de una revista en las etapas 1 y 2
Título (provisional y demasiando largo) del posible estudio
Los editores ante el reto del análisis de la audiencia y del desempeño de sus
revistas en el horizonte de la ciencia abierta: estudio de prácticas, necesidades
y expectativas de los miembros del Seminario Permanente de Editores de
México respecto de la analítica web

8. 8
Manos a la obra...
es hora de “hacer adobes” open science style
Registro de ejemplo que ofrece OSF: https://osf.io/jsznk
Base de datos de registros: https://osf.io/registries

9. 9
RegisteredReports.Details&Workflow:https://cos.io/rr/

10. Sumario
Introducción y estado de la cuestión
1. Ciencia abierta: multiplicación y diversificación de contenidos, nuevas
lecturas … ¿nuevos lectores?
2. Orientación al usuario (¿lector?) en revistas académicas en AA
3. Análisis de la audiencia y analítica web en revistas de AA
Objetivos: ¿Qué queremos saber y para qué?
4. Preguntas de investigación
Material y métodos
5. Inventario de opciones de análisis con la AW
6. Recogida de información sobre prácticas, necesidades y expectativas de
los editores: encuesta, entrevistas, grupos focales,…
Reflexión final: ¿qué podríamos obtener de este estudio? ¿es esto viable y
oportuno?
10

11. 1. Ciencia abierta: multiplicación y
diversificación de contenidos, nuevas lecturas
… ¿nuevos lectores?
Introducción y estado de la cuestión

12. 12
¿Dónde se ven ustedes como editores de revistas científicas en
un escenario de consolidación del modelo de ciencia abierta?
Masuzzo, P., & Martens, L. (2017). Do you speak open science? Resources and tips to learn the
language. https://doi.org/10.7287/peerj.preprints.2689v1

13. 13
¿Dónde se ven ustedes como editores de revistas científicas en
un escenario de consolidación del modelo de ciencia abierta?
https://cos.io/our-products/osf/

14. 14
¿Se ven como el agente final de la elaboración y distribución
de tequila? ¿joven, reposado, añejo?
https://www.casasauza.com/fabricacion-tequila

15. 15
¿Cuál es la diferencia entre el consumo de los artículos de revista
en el entorno de ciencia abierta y el consumo de tequila?
La economía de la atención: el activo más escaso será el tiempo, su administración
regulará la lógica de acceso/consumo a los contenidos digitales
• Vamos hacia un gran incremento del número de piezas “abiertas” a la lectura (propuestas
de investigación, notebooks, datos, preprints, comentarios abiertos, informes de revisión
abiertos,….).
• Los investigadores del futuro van a querer también “ver” los artículos (¡o escucharlos!)
• Contenido audiovisual (p.e. editor Jove: https://www.jove.com/)
• Contenido interactivo visual/programas ejecutables para explotar/visualizar datos
(p.e. revistas que integren jupyter: https://jupyter.org/)
• Será una realidad el conocimiento consolidado aplicando Text and Data Mining (TDM)
junto a IA: la ciencia abierta también –y quizás sobre todo – va a ser abierta a las
máquinas, al big data y a los algoritmos.

16. 16
La “adquisición” del lector como meta en ese entorno
cambiante
Tesis de fondo: Si los editores quieren posicionar sus artículos de revista a
medio-largo plazo (= tequila reposado o añejo) frente a la oferta de otras piezas
documentales del proceso de investigador, como por ejemplo preprints, datos,
notebooks o research proposals (=tequila joven o jugo de agave), deberán:
• Trabajar la mejora de la experiencia de usuario, las funcionalidades de valor
añadido del sitio web, la promoción y la creación de comunidad a su
alrededor.
• Cuidar el capital simbólico de la revista, lo que implica acumularlo y evaluar
su evolución.
Consecuencia: se precisa una apuesta por la evaluación del desempeño, el
conocimiento de la audiencia y el análisis del retorno de nuestras acciones de
posicionamiento y promoción.

17. 2. Orientación al usuario (¿lector?) en revistas
académicas en AA
Introducción y estado de la cuestión

18. 18
III International Seminar on Library and Information Science Education and Research (LIS-ER),
Universitat de Barcelona, 2015: https://youtu.be/q9xbwyGmXG8 (ppt en:
https://fbd.ub.edu/liser/sites/fbd.ub.edu.liser/files/Programa/ppt/liser-greifeneder.pdf)
El lector, ¿ese gran desconocido/olvidado?

19. 19
Fuente:ElkeGreifeneder.“Users?Ajournalhasnousers,Ithasauthors”
En:IIIInternationalSeminaronLibraryandInformationScience
EducationandResearch(LIS-ER),UniversitatdeBarcelona,2015:
https://youtu.be/q9xbwyGmXG8(ppten:
https://fbd.ub.edu/liser/sites/fbd.ub.edu.liser/files/Programa/ppt/liser-
greifeneder.pdf)
El lector, ¿ese gran desconocido/olvidado?

20. 20
¿Se está usando la técnica “Personas y Escenarios”
para revistas de AA? ¿Se usan otras equivalentes?
https://www.google.com/search?q=t%C3%A9cnica+personas+y+escenarios&source=lnms&tbm=isch

21. 21
Para reorientarnos y abrirnos al lector hay que conocerlo...
¿segmentarlo?
• Ciudadanos rasos … ¿existe para las revistas científicas?
• Estudiantes
• Docentes
• Policymakers
• Periodistas
• Autores
• Revisores
• Miembros del comité editorial/asesor
• Robots de lectura automática (TDM … y más)

22. 3. Análisis de la audiencia y analítica web en
revistas de AA
Introducción y estado de la cuestión

23. ¿Contar o no contar?... Analizar, esa es la cuestión
Lo que no se mide no se puede mejorar
Ahora bien, si se mide y no se analiza tampoco sirve de gran cosa
Analizar es interpretar los datos en un contexto y de acuerdo con la misión, objetivos y
razón de ser de la revista, y por extensión de la institución editora de la misma
23

24. ¿Qué es la analítica web?
En un post de 2007 en su blog Occam’s Razor, Avinash Kaushik, que es un referente
clave en este ámbito, define la AW así:
“Web Analytics 2.0 is:
(1) the analysis of qualitative and quantitative data from your website and the
competition,
(2) to drive a continual improvement of the online experience that your customers,
and potential customers have,
(3) which translates into your desired outcomes (online and offline)”
(https://www.kaushik.net/avinash/rethink-web-analytics-introducing-web-
analytics-20/)
24

25. 25
Rendir cuentas a las partes interesadas (= stackeholders)
Qué tipo de preguntas creen que se hacen las personas/instituciones que sostienen la revista
en la que ustedes colaboran [por cierto, ¿alguna de sus revistas publica una memoria o
informe anual?]
 ¿Cuál es el retorno que obtiene la institución editora de la revista?
 ¿Es sostenible nuestra revista?
 En relación a otras similares, … ¿qué aporta, qué añade nuestra revista?¿nuestro
desempeño y la satisfacción de la audiencia es mayor o menor?
 ¿Los autores que nos confían sus trabajos saben en qué medida sus artículos están
funcionando bien y se están consultando?
 …. Su turno

26. 26
Gestionar y optimizar el sitio web
(o las campañas de difusión de la revista)
En último término, una revista en Internet es un sitio web, o parte de un sitio web más amplio
en forma de portal, por lo que la AW que se aplica todo tipo de sitios web puede ser útil para
las revistas de AA…
 ¿Qué aspectos del web de su revista serían mejorables? (navegación, diseño gráfico,
usabilidad, claridad en las propuestas de acción que se hacen a los usuarios, …)
 ¿Conseguimos visitas de calidad que interaccionan con nuestro sitio web (más allá de
visitas que acceden a una única página)?
 ¿Los contenidos de la revista aparecen bien posicionados en buscadores generales y en
los de tipo académico?
 ¿Existen zonas geográficas a las que deberíamos llegar y no lo estamos haciendo?
 Su turno

27. ¿Qué soluciones técnicas tenemos para poder responder las preguntas
anteriores? (el caso de OJS)
27
https://docs.pkp.sfu.ca/admin-guide/en/statistics
Opción A) Estadísticas básicas OJS
Opción B) Plugin de Google Analytics en OJS
https://youtu.be/7auWqTva8Ts

28. Soluciones client-side: Google Analytics,… ¿y otros?
• El navegador del usuario envía datos de uso del sito web consultado al programa de AW, siempre que
encuentre una página html “etiquetada con un código de seguimiento”. El código puede variar si se
tiene una configuración más o menos elaborada, o de la versión que se use en función de la fecha de
implementación:
28

29. Soluciones client-side: Google Analytics,… ¿y otros?
29

30. Soluciones client-side: Google Analytics,…¿y otros?
30
DemodeMatomo
(https://demo.matomo.org/index.php?module=CoreHome&action=index
&date=yesterday&period=day&idSite=62#?idSite=62&period=range&dat
e=2018-01-01,2018-12-
31&category=Dashboard_Dashboard&subcategory=1)

31. ¿Qué están usando las revistas publicadas con OJS?
He realizado una exploración: de una muestra aleatoria de 356 revistas sobre las 4668 (muestra
aleatoria elaborada con un intervalo de confianza del 95% y margen de error del 5%), que
constan en DOAJ (https://doaj.org/csv), que indicaron “OJS” en el campo “Plataform, host or
aggregator” y que explícitamente declaran no cobrar APC:
• 47,18 % tenían activado el código de seguimiento de GA,
• 18,10 % otros códigos de programas client-side pero no GA (muy pocos Matomo),
• 34,72 ningún tracker estadístico
Se uso la extensión de navegador Ghosthery (https://www.ghostery.com) para detectar los
códigos de seguimiento.
El paso siguiente sería saber para qué lo usan y qué explotación realizan de esos datos.
31

32. 32
Hacia un catálogo de opciones de AW para revistas AA
http://hdl.handle.net/2445/117725

33. 33
Hacia un catálogo de opciones de AW para revistas AA
Medir para actuar: evaluación del desempeño de la revista y
optimización del sitio web
Hemos detectado una ausencia de trabajos que trasladen
rutinas de análisis e indicadores de AW del entorno del “web
comercial” a las revistas académicas. Se trataría de hacer algo
así como lo que hace Fagan (2014) para las bibliotecas, con
quienes las revistas open access comparten en cierta medida
modelo de negocio y un cierta orientación a publicaciones
académicas.
https://doi.org/10.1016/j.acalib.2013.06.005

34. 4. Preguntas de investigación
Objetivos: ¿Qué queremos saber y para qué?
5. Preguntas de investigación

35. 35
Necesitamos los resultados para contrastar con la realidad un
catálogo teórico de soluciones de AW para revistas de AA
PI 1: ¿Qué fuentes de datos y técnicas utilizan los editores de revistas para la
evaluación del desempeño y el análisis de la audiencia?
PI 2: ¿Por qué algunos instalan (o no) programas client-side tipo Google Analytics?
PI 3: ¿Cómo configuran y usan esos programas de analítica client-side los editores
que sí los tienen instalados?
PI 4: ¿Qué tipo de decisiones y actuaciones se derivan de los informes de uso y
usuarios de todo tipo que generan las revistas y quién las toma?

36. 6. Inventario de opciones de análisis con la AW
Materiales y métodos

37. 37
Opciones de AW para revistas AA
Se debería contar con un conjunto hipotético de informes e
indicadores potencialmente útiles para revistas de AA
Como punto de partida podemos trabajar con la propuesta de
Fagan (2014) que ya hemos mencionado.
Al preguntar cómo usan estos programas podemos ofrecer
una lista de opciones basadas en este conjunto hipotético
junto a un campo abierto para dar cabida a otras opciones.
https://doi.org/10.1016/j.acalib.2013.06.005

38. Análisis de la audiencia: ¿Quién nos visita y con qué
intensidad/calidad lo hacen?
38

39. Análisis de la adquisición: ¿Cómo descubren/llegan a nuestro sitio
web los usuarios?
39

40. Análisis del comportamiento: ¿cómo se mueven por el sitio web?
¿qué consultan?¿qué interacciones se producen?
40
Home Page

41. Análisis de la conversión: ¿Hacen alguna de las cosas que esperamos
que hagan?
41

42. 7. Captura de información sobre prácticas,
necesidades y expectativas de los editores:
encuesta, entrevistas, grupos focales,…
Materiales y métodos

43. 43
Algunos temas y preguntas para el cuestionario, guion de entrevista
(Brainstorming)
• ¿Cree que es adecuado su posicionamiento en buscadores web, buscadores académicos, en redes sociales
y en plataformas agregadoras de acceso, es el adecuado?
• ¿Qué fuentes de datos usan para contabilizar las citas recibidas por su revista y qué indicadores utilizan
cuando necesitan elaborar un reporte de desempeño?
• ¿Utilizan la evolución del número de manuscritos recibidos y la ratio entre trabajos recibidos vs publicados
como datos relevantes de su desempeño?
• ¿Qué estadisticas de uso maneja de sus revistas y qué papel juegan los programas de analítica web
externos al CMS (i.e. OJS) en su obtención?
• ¿Qué uso dan a la base de datos de suscriptores?
• ¿Utilizan técnicas directas para recoger la opinión/satisfacción/comportamiento de los usuarios de la
revista? ¿Qué técnicas y para qué tipología de usuarios?
• … su turno

44. Reflexión final: ¿qué podríamos obtener de
este estudio? ¿es esto viable y oportuno?

45. 45
Su participación distorsiona los resultados: ¡Albricias!

46. (Barcelona: Tusquets, 2006)
http://catalogo.rebiun.org/rebiun/record/Rebiun04137394
• «De A más cómo, menos por qué dice el autor: "Es el
aforismo de los que he recogido que, a mi entender, resume
mejor el pensamiento científico. Preguntar por las causas es
siempre una pregunta de emergencia, porque causas puede
haber muchísimas. En cambio, preguntarse por el cómo es
investigar el proceso.”»
• «…“son reflexiones construidas para comprender, surgen
como consecuencia de mi quehacer cotidiano dedicado a la
ciencia, que finalmente no es otra cosa que una técnica de
reflexión", apunta el físico y catedrático de Procesos
Irreversibles de la Universidad de Barcelona.»
El País, 18 abril 2006:
https://elpais.com/diario/2006/04/18/cultura/1145311204_85
0215.html

47. Muchas gracias por su atención
Cristóbal Urbano
https://orcid.org/0000-0003-0935-6436
urbano@ub.edu