1. Indicadores de calidad de las publicaciones científicas en Ciencias de la Salud Emilio Delgado López-Cózar Profesor de Metodología de la Investigación
3. ¿Qué es la calidad de una publicación científica? Algo fácil de percibir pero difícil de medir Consenso implícito: cualquier científico competente puede distinguir los trabajos buenos de los malos y clasificar unos como mejores que otros Multidimensional No existen medidas absolutas y directas de la calidad sino indicadores parciales
4.
5.
6.
7.
8.
9. ¿Y si le preguntamos a los científicos? Muestra: 1294 Profesores TU y Catedráticos con 1 o 2 tramos Buela-Casal, G. y Sierra, J. C. (2007). Criterios, indicadores y estándares para la acreditación de Profesores Titulares y Catedráticos de Universidad. Psicothema, 19, 357-369 * * * Opinión científicos españoles
10. ¿Y si les preguntamos a las agencias españolas de evaluación? CNEAI, ANECA, ANEP Indicios de calidad libros ANECA CNEAI Reseñas en las revistas científicas especializadas Prestigio de la editorial, los editores, la colección en la que se publica la obra Número de citas: cantidad y calidad ANEP Criterios
11. “ Se valorarán preferentemente las aportaciones que sean artículos en revistas de reconocida valía, aceptándose como tales las que ocupen posiciones relevantes en los listados por ámbitos científicos en el «Subject Category Listing» del « Journal Citation Reports » del « Science Citation Index » (Institute for Scientific Information -ISI- Philadelphia, PA, USA). Las revistas electrónicas se considerarán cuando aparezcan en los listados del ISI ” “ Con carácter orientador se considera que para obtener una evaluación positiva en las áreas de Ciencias Biomédicas, tanto básicas como clínicas, al menos dos de dichas aportaciones deben ser artículos publicados en revistas de alto impacto entre las recogidas bajo cualquiera de los epígrafes del Science Citation Index ” Indicios de calidad revistas
12. Se puede considerar un menor número de trabajos si corresponden a publicaciones de elevada calidad “ [Publicar artículos en revistas científicas] es el elemento fundamental de la evaluación y la autoría de un buen número de publicaciones en revistas de calidad permite conseguir casi todos los puntos (…) para obtener la puntuación máxima en este apartado se requiere la aportación por el solicitante de un mínimo de (…) publicaciones científicas recogidas en Science Citation Index , si la mitad de ellas pertenecen al primer tercio de la categoría ” “ Con carácter general, en estas ramas del conocimiento las aportaciones en revistas no cualificadas con índice de calidad relativa no se consideran ” Indicios de calidad revistas
14. Número de citas recibidas en 2006 por los trabajos publicados en 2004 y 2005 Número de trabajos publicados en 2004 y 2005 Impact Factor = A/B 2006 2005 2004 2006 Impact Factor 2003 2007 Tiempo JCR La formula mágica
15.
16.
17. Cautelas Favorecen la publicación de trabajos que tienen una alta potencialidad de citación, que no computan en el denominador pero sí en el numerador de la fórmula que calcula el factor de impacto
18.
19.
20.
21. Muchas gracias por su atención Emilio Delgado López-Cózar [email_address] ec3.ugr.es/emilio Grupo de investigación Evaluación de la Ciencia y de la Comunicación Científica www.ec3.ugr.es ec 3
Notas do Editor
Un congreso que lleva por título innovación e investigación por fuerza debe plantearse alguna ponencia sobre la publicación, y subsidiariamente, sobre la evaluación de las publicaciones científicas. La publicación es destino final, obligado de cualquier investigación. Quién no tiene que publicar? Y dónde publicar? ¿cómo saber cuales son los mejores canales para dar a conocer nuestras investigaciones Se habla, en cualquier caso, de investigación e innovación y no está mal, en una disciplina que despierta a la investigación: enfermería, fisio, to, podol. Y por supuesto, por la amistad que me une con Maria Carmen y Azucena y su cariñosa invitación
España en estado de excepción evaluativa: Parafraseando al clásico bien podría decirse que un fantasma recorre la Universidad Española, es el fantasma de la evaluación, de repente todo el mundo se ha puesto a evaluar a todo el mundo a todas horas. Hace 25 años este verbo solo lo conjugaba el profesor en su voz activa cuando evaluaba a sus alumnos pero no en su voz pasiva o lo hacía ocasionalmente cuando accedía la plaza o ganaba la oposición (uno o dos ascensos) Hoy se conjuga en su voz activa (evalúo) o pasiva (soy evaluado). Y se hace a todos los niveles (personas, programas, instituciones, titulaciones, proyectos, publicaciones), en los diversos ámbitos geográficos en que despliega su actividad (internacional, nacional, regional y local) y - Tesis: informes valoración, tribunal, premio extraordinario - Artículos, libros: revisor o asesor - Proyectos de investigación - Acceso a plazas: comité - Promoción: tribunal - Sexenios de investigación - Tramos autonómicos - Evaluación institucional: autoevaluación, evaluación externa Cuando uno se levanta por la mañana dice a quien evaluaré o hoy o quien me evaluará a mi Quién notiene que acreditarse, habilitarse, opositar…
Permitidme antes de adentrarnos en el tema de la conferencia que averiguemos que es lo que piensan los científicos españoles de ciencias de la salud respecto a cuales son los criterios que más deberían pesar en la evaluación de un curriculun de un profesor de ciencias de la salud