Torres-Salinas, D; Jiménez-Contreras, E. Cómo utilizar los indicadores bibliométricos para la solicitud de sexenios y acreditaciones / Nola erabili adierazle bibliometrikoak seiurtekoak eta egiaztapenak eskatzeko. Organizado por el Vicerrertorado de Investigación de la Universidad del País Vasco-Euskal Herriko Unibertsitateko. San Sebastián, Bilbao, Vitoria, 1-3 de Diciembre de 2009
Y éstos son los diferentes módulos para cada uno de ellos te adjunto un pdf, te los voy mandando uno a uno
- MÓDULO 1. Criterios generales de evaluación. ANECA, CNEAI y UNIQUAL
- MÓDULO 2. Criterios por Área para artículos de revista científica
- MÓDULO 3. Cómo localizar los indicios de calidad: fuentes de información
- MÓDULO 4.Consejos para mejorar la difusión y recuperación de los trabajos
3. Contenido
1. Criterios generales de evaluación: ANECA,
CNEAI y UNIQUAL.
2. Criterios específicos para revistas científicas
por áreas.
3. Cómo localizar indicios de calidad.
4. Consejos para mejor la difusión y
recuperación de nuestros trabajos.
10. Aspectos a tener en cuenta
• Baremo muy detallado
• Aplicación informática muy
compartimentada y
muy lenta de completar
• Evaluación por dos expertos y
por un comité
(consenso / mayoría)
• Retroalimentación
• Plazos
16. Fundamentos ANECA de Evaluación
En los ámbitos científicos de orientación básica
(Ciencias y Ciencias de la Salud) se consideran
especialmente las publicaciones en revistas de
reconocido prestigio
En los ámbitos de Arte y Humanidades, Ciencias
Sociales y Jurídicas se valoran especialmente las
publicaciones en revistas y libros de prestigio, así
como creaciones artísticas y profesionales
innovadoras
En ámbitos mas aplicados como Ciencias Aplicadas,
Ingenierías y Arquitectura se consideran de
especial relevancia el desarrollo de patentes y
actividades de transferencia de tecnología
17. Fundamentos ANECA de Evaluación
¿Que significa publicaciones de prestigio?
Es un indicador formal. ANECA, siguiendo a CNEAI
considera que en los distintos ámbitos del
conocimiento existen índices internacionales que
ordenan por relevancia las publicaciones de
reconocido prestigio
Se inventa el concepto de Publicaciones en Revistas
Indexadas con INDICE DE CALIDAD RELATIVO si
bien, acto seguido las equipara a Publicaciones en
Revistas recogidas en los Journal Citation Reports
(JCR o equivalentes de cada especialidad
JCR)
18. LA AUTORÍA. CNEAI-ANECA
Publicaciones en revistas
Pueden considerarse también artículos en revistas sin ICR y en
revistas no incluidas en las mencionadas base de datos, siempre que
cumplan las siguientes características:
•bibliográficos de su especialidad
• Acepta y publica trabajos en mas de una lengua
• Publica fundamentalmente trabajos de investigación
Declara periodicidad y la cumple
• Antigüedad superior a tres años
• Publica un % elevado de trabajos de autores externos a la revista
(Consejo de Redacción e institución editora)
• Cuenta con Comité Científico de nivel internacional
19. Publicaciones Indexadas Vs No indexadas
ANECA clasifica en dos bloques:
Revistas Revistas no
Indexadas o con Indexadas o sin
Índice de Índice de
Calidad Relativo Calidad Relativo
20. Congresos
Como Publicaciones Científicas en Revistas
Ingeniería y Arquitectura: Excepcionalmente. Incluidos en Actas
Excepcionalmente.
de Congresos Internacionales de prestigio cuando tales
congresos son medio de difusión comparable a revistas JCR y
selección por Peer Review.
Como Libros o Capítulos de Libro
En todas las áreas de conocimiento. Congresos organizados por
conocimiento.
asociaciones internacionales o nacionales de periodicidad fija, que
publican actas del congreso con contribuciones completas
seleccionadas previamente mediante evaluación externa y con
ISBN.
ISBN.
Como Congresos, Seminarios, .. (1.A.5 / 1.A.6)
En todas las áreas de conocimiento, se valoran los de carácter
internacional o nacional de especial relevancia en su ámbito, que
incluyan revisión por pares y con la antigüedad suficiente para ser
referentes en su ámbito
21. Los libros
• Libros y capítulos de libro de carácter científico e investigación,
publicados en editoriales de prestigio nacional o internacional
•Ediciones o traducciones anotadas
• Reseñas bibliográficas; Prólogos
• Ediciones de las tesis se valoran como libros monográficos solo
si han sido publicadas en editoriales de prestigio
• Preferentemente: libros con ISBN publicados en editoriales
especializadas de reconocido prestigio que garanticen un riguroso
proceso de selección y evaluación
• Excluidos (aunque esta exclusión se cita solo en Ciencias Sociales y Jurídicas:
libros de texto y manuales (Publicaciones docentes)
22. Los libros
Criterios ANECA
Número de citas generadas (cantidad y calidad)
Prestigio de la editorial, los editores, la colección en la que se publica la obra
Reseñas en las revistas científicas especializadas
Acreditar riguroso proceso de selección y evaluación de originales
Que no estén publicados por la misma institución en la que trabaja el
investigador, salvo que ésta satisfaga los criterios especificados en el
Apéndice 1
Traducciones de la propia obra a otras lenguas
Inclusión en bibliografías independientes del autor y su entorno
Presencia en bases de datos, repertorios bibliográficos especializados y
catálogos de bibliotecas universitarias
Acreditar un proceso de selección riguroso mediante evaluadores externos a
las Universidades de la Comunidad Autónoma (Derecho)
Poseer ISBN (imprescindible)
23. Creaciones artísticas
• En áreas de A&H caracterizadas por actividades de creación artística, estos méritos son
especialmente valorados, y pueden suplir carencias en publicaciones en revistas, pero siempre
en función del reconocimiento de las obras artísticas, que podrán ser:
• creaciones profesionales o artísticas, obras artísticas por encargo, presentadas en
exposiciones y/o ferias, museos, informes científicos y técnicos, trabajos presentados a
premios y concursos, participación en exposiciones, fotografías científicas, aportaciones
vinculadas a la valoración, incremento y disfrute del patrimonio histórico y artístico
(Arqueología, arte..)
Indicios de calidad obras artísticas o profesionales
• Participación en exposiciones como autor o comisario con publicación de catálogo con
impacto en los medios especializados
• Premios, distinciones o menciones de calidad obtenidas
• Reconocimiento profesional y público
• Impacto obtenido en la crítica especializada
24. Proyectos y Contratos
• Participación como IP o como investigador en Proyectos de programas competitivos de
la UE u otros organismos internacionales, Planes Nacionales, Autonómicos y de otros
organismos públicos y privados. Requisitos: obtenidos en convocatorias competitivas,
sometidos a evaluación externa por agencias nacionales o internacionales como la ANEP
o similar
• Participación como IP o como investigador en Contratos de investigación con la
Administración Pública, instituciones o empresas, siempre que generen conocimiento (si
no a 1.C.2 transferencia al sector productivo)
• Otros méritos asociados a los proyectos y contratos: pertenencia a redes
internacionales, publicaciones especializadas derivadas y autoría en informes técnicos
asociados a contratos. La participación como IP en Proyectos de relevancia se valora
adicionalmente también como mérito de gestión en 4.C (TU) 3.C (CU
25. Transferencia
• Patentes y productos con RPI
Especialmente valorada en ámbitos tecnológicos en los que esta actividad es significativa
• Patentes nacionales o internacionales en explotación o con contrato de cesión o
licencia
• Patentes solicitadas que hayan superado alguna fase de valoración
• Productos con RPI (obras artísticas, técnicas, programas informáticos
Transferencia de conocimiento al sector productivo
• Actividades innovadoras de transferencia de conocimiento, informes, desarrollo de
sofware en explotación, colaboración con empresas
• Actividades ligadas al mantenimiento e incremento del patrimonio cultural, artístico,
museístico
• Cursos y seminarios impartidos en empresas y organismos públicos asociados a
transferencia de resultados o a formación de personal cualificado
26. Otros méritos
Movilidad
• Estancias media/larga (superiores a 1 mes) en centros de
investigación de prestigio
• Becas y ayudas o contratos obtenidos en convocatorias
competitivas para realizar estancias
Otros meritos Actividad Investigadora
• Evaluador (Peer) de artículos para revistas JCR o equivalentes
• Evaluador de proyectos (ANEP o similares)
• Pertenencia a comisiones de selección de solicitudes de
movilidad
OJO. Pertenencia a Consejos editoriales revista JCR o
equivalentes en méritos de gestión 3.C (CU), 4.C (TU)
32. Criterios 2009
Ojo
Ayer se publicaron los criterios para la convocatoria 2009. Hasta donde
hemos podido comprobar los criterios se mantienen prácticamente
igual. Cambio significativo, se tendrán en cuenta “o aquellas revistas
acreditadas por la FECYT”, si cumplen apéndice 1
33. ÍNDICE S DE LA UPV/EHU
ÍNDICE S = NSO/NSP
NSO/NSP:
NSO=número total de sexenios obtenidos por el colectivo
NSP=número total de sexenios posibles para dicho colectivo.
39. LA AUTORÍA. CNEAI-ANECA
CNEAI. Filosofía general
-Introducir un régimen retributivo para incentivar, mediante evaluaciones, la
actividad investigadora de calidad entre el profesorado de las Universidades
y el CSIC-
-Es aspiración de la CNEAI fomentar que los investigadores orienten sus
trabajos a lograr resultados de amplia repercusión (internacional) científica y
social
-Se han constatado dos hechos desde la puesta en marcha del sistema: 1. la
ciencia española ha experimentado un importante crecimiento tanto en
calidad como en cantidad.
2. La CNEAI ha desarrollado una amplia experiencia evaluadora
-Tanto es así que la CNEAI ha sido y es referente para otras agencias en
tareas evaluadoras y políticas de evaluación de personas e instituciones
-Tras la larga experiencia acumulada, la Resolución de 2005 consideró
objetivo fundamental el precisar la objetivación de los criterios de
evaluación a fin de poder determinar que investigación tiene suficiente
repercusión científica y socioeconómica en base a la utilización de
indicadores aceptados internacionalmente
40. Fundamentos CNEAI de Evaluación
Cinco aportaciones ordinarias
Libros; capítulos de libro; prólogos (estudios preliminares de
investigación con aportación valiosa), introducciones y
anotaciones de textos; artículos en revistas; patentes o
modelos de utilidad.
En determinadas áreas de conocimiento, son también
aportaciones ordinarias los desarrollos tecnológicos,
proyectos arquitectónicos singulares, creaciones artísticas,
actas de congresos de relevancia
Excepcionalmente aportaciones extraordinarias:
Informes, estudios, dictámenes; trabajos técnicos, artísticos;
participación en exposiciones, excavaciones; dirección de
tesis; comunicaciones a congresos
41. Fundamentos CNEAI de Evaluación
CNEAI precisa que exige a las aportaciones
Contribución progreso del conocimiento, innovación o creatividad
Participación relevante en los trabajos: argumentar participación
y orden de firma
Relevancia científica del medio de difusión en que se publica la
aportación : Impacto (revistas), Editorial (Libros)
Premios y distinciones recibidas: para creaciones artísticas
Referencia que otros autores hacen y que sean indicativos de
relevancia: se refiere a las citas
Apreciaciones del propio interesado sobre las aportaciones de su
trabajo al progreso del conocimiento. En publicaciones colectivas
mencionar la contribución del solicitante
Reseñas en revistas especializadas
En patentes: datos de explotación económica
42. LA AUTORÍA. CNEAI-ANECA
CNEAI. El apéndice 1
- Resolución de 2005: incluye el Apéndice 1 con una lista
de criterios mínimos de carácter formal, de calidad
editorial y de difusión que debe cumplir un medio de
difusión de la investigación (revista, libro o congreso) para
que pueda ser reconocido a priori como de suficiente
garantía
- No obstante, se deja abierta la posibilidad para que los
autores comuniquen a la Comisión las citas, valores y
reconocimientos independientes que han tenido las
publicaciones elegidas para su curriculum
-Los requerimientos mínimos que se exponen para obtener
una evaluación positiva tratan de reglar lo más posible el
proceso evaluador y su aplicación no tiene carácter
absoluto
43. LA AUTORÍA. CNEAI-ANECA
CNEAI. El apéndice 1
6. Anonimato en la revisión de los
Apéndice 1 manuscritos.
Criterios que hacen referencia a la 7. Comunicación motivada de la decisión
calidad informativa 8. Existencia de un consejo asesor,
formado por profesionales e
1. Identificación de los miembros de los investigadores de reconocida solvencia,
comités editoriales y científicos. sin vinculación
2. Instrucciones detalladas a los autores.
3. Información sobre el proceso de Criterios sobre la calidad científica
evaluación y selección de manuscritos o de las revistas
jueces.
4. Traducción del sumario, títulos de los
9. Porcentaje de artículos de investigación;
artículos, palabras clave y resúmenes al
más del 75% de los artículos.
inglés, en caso de revistas y actas de
Congresos. 10. Autoría: grado de endogamia editorial,
más del 75% de los autores serán externos
Criterios sobre la calidad del proceso al comité editorial y ajenos a la
organización editorial de la revista.
editorial
11. Indexación de las revistas en las bases
5. Periodicidad
de datos internacionales especializadas
48. UNIQUAL = Imprecisión
-No Indica criterios de calidad de las revistas ni de los libros ¿Cómo deben ser?
- No da referencia sobre bases de datos
- No hace distinciones entre disciplinas
- Parece más una guía basada en ANECA que unos criterios
Por ejemplo:
Publicaciones Científicas Indexadas en revistas de nivel medio/alto de su área
[¿?]
Publicaciones Científicas en revistas con consejos de redacción o revisores
nacionales [¿?]
Consejo: en general las agencias autonómicas adoptan los criterios nacionales
sin demasiado criterio, por tanto mejor seguir ANECA para interpretar los
criterios UNIQUAL
49.
50. LA AUTORÍA. CNEAI-ANECA
¿Qué dicen las agencias de la autoría?
CNEAI
El número de autores no será evaluable como tal, pero si deberá estar justificado
por el tema, complejidad y extensión del mismo: Campos 1,2,3,4,5,6: Física,
Matemáticas, Biología Celular y Molecular, Ciencias Biomédicas, Ciencias de la
Naturaleza, Ingenierías y Arquitectura
Salvo que estuviera plenamente justificado por la complejidad del tema y/o la
extensión del trabajo, un elevado número de autores puede reducir la calificación
asignada a una aportación. Campos 7,8,10,11: Sociología, Política, Educación,
Economía, Geografía, Psicología, Historia y expresión artística, Filosofía, Filología,
Lingüística
El número de autores de una aportación deberá estar justificado por el tema,
complejidad y extensión del mismo. Para que una aportación sea considera, el
solicitante deberá haber participado activamente haciendo constar su concreta
autoría en la investigación publicada mediante referencia a páginas, capítulos o
apartados. Sólo se valorará la labor investigadora personal individualizada del
solicitante. Campos 9: Derecho
ANECA
Se tiene en cuenta la posición y el número de autores, reduciendo el valor de la
publicación cuando este número sea superior a la media en la especialidad. Todas
las áreas de conocimiento
52. LA AUTORÍA. CNEAI-ANECA
¿Cual debe ser el número de autores? (1)
Número de autores (aprox.) en trabajos en revistas Web of Science
(Principalmente internacionales y anglosajonas)
Categoría Categoría
Agricultura 4 Matemáticas 2
Ciencias de la Alimentación 4 Ing. Mecánica, naval, … 3
Ingeniería Civil y Arquitectura 3 Medicina 5
Ciencias Computación / Informática 3 Bioquímica y Biología Molecular 5
Ciencias Sociales 2/3 Psicología 3
Derecho 2 Química 4
Economía 2 Comunicaciones 3
Ing. Eléctrica y Electrónica 4
Farmacia y Farmacología 5
Filosofía, Filología 1
Ganadería y Pesca 5
Historia 1
Ciencias materiales 5
53. LA AUTORÍA. CNEAI-ANECA
¿Cual debe ser el número de autores? (2)
Número de autores (aprox.) en trabajos en revistas In-Recs/In-Recj
In-Recs/In-
(revistas nacionales)
Categoría
Antropología 1
Documentación 1/2
Ciencia Política 1
Comunicación 1
Economía 1/2
Educación 1/2
Geografía 2
Psicología 2
Sociología 1/2