Conferencia "Preservación digital en una realidad obsolescente"
Análisis de Altmetrics en artículos publicados por investigadores peruanos en PLOSOne
1. Análisis de Altmetrics en artículos
publicados por investigadores
peruanos en PLOSOne
Seminario “Evaluación de la producción científica: un
enfoque bibliométrico”
Carlos Quispe Gerónimo
http://carlosqg.info
PUCP, Lima, 07 de noviembre de 2013
2. Objetivos de la presentación
• Explorar los Alt-Metrics y su influencia en
la evaluación de la investigación
• Conocer la naturaleza de un MegaJournal
como PLosOne
• Analizar la productividad de autores
peruanos en PLosOne
–Determinar si las descargas, menciones
en redes sociales o comentarios tienen
influencia en el impacto de un trabajo
3. El factor de impacto
Mide el impacto de una
revista científica en la
comunidad científica
Indicador más utilizado en
los sistemas de evaluación
de la investigación científica
Mide la relación entre el
número de citaciones que ha
recibido una revista por
parte de otras revistas en un
período de 2 años en
relación al número de
artículos producidos por la
revista en el mismo período
de tiempo
Se sobreentiende que si un
autor publica en una revista de
alto impacto es un autor
relevante para una comunidad
de investigación (efecto halo)
4. Sin embargo, la comunidad académica
ha empezado a cuestionarla por…
Usar solo el FI para
juzgar la calidad de
artículos o autores es
peligroso.
El FI no facilita el
trabajo
interdisciplinario y por
ende lo desmotiva.
El FI solo es aplicado
para un pequeño
grupo de revistas
Coerción a autores
para que citen a la
revista adonde envían
sus trabajos
Factor de impacto
El FI es afectado por la
mezcla de tipos de
publicación en una
revista.
El uso del FI crea un doble
Efecto Mateo
No hay una relación
clara entre el número
de citaciones y la
calidad del artículo.
Los FI no son
reproducibles y no son
transparentes
El cálculo del FI conlleva
un período de entre 1.5
a 4.5 años
5. Entonces ¿qué hacer?
Jason Priem (2010)
propone el uso de
medidas alternativas al FI
que midan esencialmente
el trabajo de forma
individual es decir que
hayan métricas que midan
a nivel cada trabajo (AltMetrics)
6. Declaración de DORA (Declaration of
Research Assesment)
• General Recommendation
• 1. Do not use journal-based
metrics, such as Journal Impact
Factors, as a surrogate measure
of the quality of individual
research articles, to assess an
individual scientist’s
contributions, or in hiring,
promotion, or funding decisions.
• Make available a range of articlelevel metrics to encourage a shift
toward assessment based on the
scientific content of an article
rather than publication metrics of
the journal in which it was
published.
8. Metodología
• Se hizo una búsqueda avanzada en PLosOne para filtrar
a los investigadores que tuvieran filiación con una
institución peruana.
• Para ello se emplearon las variables:
author_affiliate:peru
• El análisis cubre desde el año 2006 hasta octubre de
2013.
• Con los resultados encontrados se muestra en primer
lugar un análisis de la productividad.
9. Aporte de investigadores peruanos en
PLosOne
• En total aparecen 139
artículos de
investigación dentro de
PLosONe.
0.18%
Artículos en PLosONE
• Hasta la fecha, este
MegaJournal tiene
publicados 75382
artículos
Artículos Peruanos en
PLosONE
99.82%
10. Temas cubiertos por artículos en
PLosONE
Zoología
5
Química
1
Minería
1
Medicina
113
Ecología
2
Ciencias sociales
1
Ciencias forestales
1
Ciencias de la computación
1
Biología
Temas cubiertos en PLosOne
12
Agricultura
2
0
20
40
60
80
100
120
11. Dentro del área médica que se investiga
16
14
14
12
12
10
9
9
8
8
8
8
6
5
4
4
3
3
3
2
2
0
2
1
1
3
2
1
2
1
2
1
1
1
1
2
1
1
1
1
13. Instituciones que publican en PLosONE
1%
1%
4%
4%
5%
12%
1%
Empresa privada
Entidad estatal
4%
7%
Entidad estatal-Entidad internacional
1%
Entidad internacional con sede en Perú
Entidad internacional-ONG
6%
ONG
ONG-Entidad estatal
1%
Universidad
Universidad-Entidad estatal
Universidad-Entidad internacional
Universidad-Entidad internacional-Entidad estatal
53%
Universidad-ONG
Universidad-ONG-Entidad estatal
15. Número de descargas
• Los 139 artículos de
investigación han
recibido 403847 vistas.
300000
257090
250000
200000
• En promedio cada
artículo ha recibido
2905 vistas.
150000
PLoSOne
PMC
100000
50264
50082
50000
21333
0
HTML Page Views
PDF Downloads
16. Uso de recursos para compartir
artículos
• Los servicios
empleados para
almacenar recursos son:
Mendeley, CiteULike y
Connotea.
1.75%
0.53%
Mendeley
CiteULike
Connotea
97.72%
17. Menciones en redes sociales
• En total, los 139 artículos
han generado 7327
menciones en redes
sociales
• Del mismo modo, se han
generado discusiones en
blogs y en Wikipedia
10
Discusiones
• Las redes sociales
empleadas son: Facebook
y Twitter
Wikipedia
27
Twitter
184
Facebook
7106
0
2000
4000
6000
8000
18. Impacto de trabajos: citaciones
• Los 139 artículos han
recibido 755 citaciones
• En promedio, cada
artículo ha recibido 5,43
citaciones
32%
Trabajos con
citaciones
Trabajos sin citaciones
68%
20. Conclusiones
• Para la muestra analizada no existe una relación entre el
número de descargas y las citaciones recibidas por artículo.
• La Universidad Peruana Cayetano Heredia contribuye con el
57,6% de la productividad analizada
• La contribución peruana en PLoS One se centra especialmente
en la medicina (81% de contribuciones).
• Las universidades deben apostar por el modelo de PLosOne
para aumentar su visibilidad en el mundo académico.
• Debería impulsarse la diseminación de artículos mediante
Twitter.
• Debe reconocerse a los Alt-Metrics como parte de los
sistemas de evaluación de la actividad científica.