Este documento resume los resultados de la sexta convocatoria del Sello de Calidad FECYT para revistas científicas españolas. De las 227 revistas evaluadas, 97 (un 43% de tasa de éxito) recibieron el Sello. La mayoría de las revistas con Sello se encuentran en las áreas de humanidades y ciencias sociales. El documento también describe el proceso de evaluación y los indicadores utilizados para medir la calidad editorial y científica de las revistas.
1. 1
Evaluación de la calidad editorial y
científica de las revistas científicas
españolas FECYT 2018
23/05/2019
9ª Conferencia internacional sobre revistas de Ciencias Sociales
y Humanidades
2. 2
Proyecto de apoyo a las revistas científicas
• El Proyecto ARCE se creó en 2006 para responder a una situación de:
• Escasa presencia de revistas españolas en índices internacionales
• Limitada profesionalización de las revistas
• Publicación electrónica limitada o deficiente
• Necesidad de difusión de estándares de edición
• FECYT cuenta con un sistema que identifica a las revistas científicas españolas de calidad contrastada, utilizando un
modelo sólido y coherente, acorde a estándares internacionales
3. 3
Potenciar la mejora de la
calidad editorial y de los
contenidos publicados
Decantar las revistas
científicas españolas de
calidad
Aumentar la visibilidad y el
impacto de la ciencia
publicada en España
Apoyar la profesionalización
mediante el uso de software
de gestión integral de edición
y publicación electrónica
Elaborar una herramienta útil
para las agencias de
evaluación
4. 44
Sello de calidad FECYT para las revistas
científicas españolas
¿Cómo?
• Difusión de estándares de calidad editorial y
científica en revistas
• Proceso de evaluación de calidad de revistas
científicas españolas: FECYT concede a las
revistas aprobadas un Sello de Calidad
• Promoción de las revistas acreditadas:
• Presentación a WoS y Scopus de las revistas de
con Sello de Calidad
• Búsqueda de reconocimiento por parte de
agencias de evaluación
• Apoyo a la edición electrónica: RECYT y
formación en OJS a editores
Garantías
• Cumplimiento de los principios de publicidad,
transparencia, concurrencia, objetividad,
igualdad y no discriminación
• Certificación ISO 9001 del proceso de evaluación
• Eficacia en la ejecución: cumplimiento de plazos
establecidos (máx. 6 meses)
• Gestión documental electrónica de las solicitudes
• Comisión de Evaluación: expertos en bibliometría
y por áreas de conocimiento
• Evaluación de los procesos: grupo de expertos
5. 5
VI Convocatoria: Proceso de evaluación
Además de las bases, la guía de evaluación
es un documento público que detalla los
indicadores y criterios de evaluación.
Disponible en:
https://calidadrevistas.fecyt.es
REGISTRO
Requisitos
Documentación
Cuestionario de
autoevaluación
Apoyo
institucional
Solicitud
electrónica
FASE 2
EVALUACIÓN DE CALIDAD
POR ÁREAS DE
CONOCIMIENTO
Evaluación por expertos temáticos
FASE 1
CALIDAD EDITORIAL Y
CIENTÍFICA
COMISIÓN DE EVALUACIÓN
expertos en bibliometría y
evaluación de la ciencia
Imágenes: Martha Ormiston / Sergey Demushkin from Noun Project
REVISIÓN TÉCNICA DE
LA DOCUMENTACIÓN
6. 6
Se utiliza este indicador para reevaluar de oficio las revistas que
tienen que renovar
división por áreas de conocimiento de las revistas y considerando de
patrones de citación
revistas no indexadas: cálculo de citas recibidas por revistas sí
indexadas
cálculo por medio de la ponderación de fuentes de citación y
visibilidad
Citas de los últimos 5 años.
VI Convocatoria: Repercusión, impacto y
visibilidad
7. 77
60% suma de las Citas en las distintas bases de datos (WoS, SCOPUS, ESCI y SCielo), otorgan la máxima puntuación (60) y reescala
según la puntuación de la revistas que ha obtenido la máxima.
10% Cuartiles, al igual que en los casos anteriores, la puntuación de cada ítem se reescala con la puntuación máxima:
o 1/2 Cuartil JCR
o 1/2 Cuartil SJR
10% h-Index , la puntuación de cada ítem se reescala con la puntuación máxima de cada ítem de cada una de las revistas:
o 1/3 h-Index WoS
o 1/3 h-Index SJR
o 1/3 h5-Index Google S.Metrics
20% la puntuación total Índice Compuesto de Difusión Secundaria de MIAR (ICDS) (20 la máxima puntuación)
VI Convocatoria: Repercusión, impacto y
visibilidad
8. 8
VI Convocatoria: Repercusión, impacto y
visibilidad
Umbral de corte: el 15% de la puntuación de referencia en cada
modalidad.
Para el cálculo se han tenido en cuenta las revistas que se han
presentado a la evaluación para la obtención del Sello por primera vez
más las que lo obtuvieron en pasadas convocatorias. nido en cuenta las
revistas que se han presentado a la evaluación para la obtención del
Sello por primera vez más las que lo obtuvieron en pasadas
convocatorias.
9. 9
VI Convocatoria: Indicadores de recomendado
cumplimiento
12. Políticas de acceso abierto y reúso:
Política editorial en favor del acceso abierto a los contenidos
y especificación de los permisos de autoarchivo.
Especificación de quien posee los derechos de explotación o
patrimoniales.
Bajo qué licencias se publican los contenidos.
Indicar importes de APC’s.
13. Aspectos éticos:
adhesión a normas y códigos de ética internacionales o bien, tener su
propio código de ética.
10. 10
VI Convocatoria: Indicadores de recomendado
cumplimiento
14. Políticas de difusión de contenidos:
Uso de canales en redes sociales.
Mención de cómo referenciar los artículos
15. Uso de estadísticas:
Datos estadísticos de gestión editorial.
Estadísticas de uso.
Métrica complementaria a la tradicional basada en citas.
11. 11
VI Convocatoria: Indicadores de recomendado
cumplimiento
16. Navegación y funcionalidad en el acceso a contenidos:
Motor de búsqueda en sus contenidos
Multiplicidad en los formatos de los artículos.
Existencia de sumarios, de tablas de contenido o una estructura que permita el
acceso a los artículos.
Navegación web ergonómica, sencilla y accesible.
Servicios de valor añadido para los lectores.
17. Interoperabilidad:
Uso de identificadores unívocos y persistentes.
Uso de protocolos de interoperabilidad que permitan ser recolectados por otros
sistemas de distribución.
Dispone de un API permita la minería de datos.
12. 12
VI Convocatoria: Resultados
Modalidades Campos
Revistas que no
superan la fase
1
Revistas que
superan la fase 1
Revistas que no
superan la fase 2
Revistas Sello
FECYT
Modalidad 1: Ciencias Puras
y aplicadas
Ingenierías y Arquitectura 7 1 1 0
Matemáticas y Física 1 0 0 0
Química 0 1 0 1
Modalidad 2: Ciencias de la
Vida
Ciencias Biomédicas 5 4 1 3
Ciencias de la Naturaleza 4 3 0 3
Modalidad 3: Ciencias
Sociales
Ciencias Económicas y Empresariales 6 3 2 1
Ciencias Sociales, Políticas, del
Comportamiento y de la Educación
33 25 1 24
Derecho y Jurisprudencia 14 15 4 11
Modalidad 4: Humanidades
Filosofía, Filología y Lingüística 18 27 0 27
Historia, Geografía y Artes 28 32 5 27
Total general 116 111 14 97
13. 13
VI Convocatoria: Resultados por modalidad
Presentadas Sello Tasa de éxito
Humanidades 105 54 51%
Ciencias Sociales 96 36 38%
Ciencias de la Vida 16 6 38%
Ciencias Puras 10 1 10%
Humanidades Ciencias
Sociales
Ciencias de la
Vida
Ciencias
Puras
105
96
16 10
54
36
6 1
Presentadas Sello
14. 14
VI Convocatoria: Resultados por campos
0 10 20 30 40 50 60
Campo 10. Historia, Geografía y Artes
Campo 7. Ciencias Sociales, Políticas, del Comportamiento y…
Campo 11. Filosofía, Filología y Lingüística
Campo 9. Derecho y Jurisprudencia
Campo 4. Ciencias Biomédicas
Campo 6. Ingenierías y Arquitectura
Campo 8. Ciencias Económicas y Empresariales
Campo 5. Ciencias de la Naturaleza
Campo 1. Matemáticas y Física
Campo 2. Química
60
58
45
29
9
8
9
7
1
1
27
24
27
11
3
1
3
1
Sello Presentadas
16. 16
Trayectoria del Sello de Calidad FECYT
• Seis convocatorias generales (2007, 2009, 2011, 2013, 2015 y 2018),
de participación voluntaria y abierta a las revistas científicas
españolas y tres procesos de renovación del Sello de Calidad (2013,
2015 y 2016)
• VI convocatoria: de nueva incorporación + renovación
• Esfuerzo constatado de las revistas por mejorar su calidad y
creciente interés en el Sello de Calidad
Ed. Presentadas Obtienen el Sello Tasa de éxito
I 275 33 12%
II 443 46 10%
III 255 31 12%
IV 355 99 28%
V 354 110 31%
VI 227 97 43%
0
50
100
150
200
250
300
350
400
450
500
I II III IV V VI
Presentadas
Obtienen el Sello
12% 10%
12%
28%
31%
43%
1 2 3 4 5 6
Tasa de éxito
Tasa de éxito
VI en resolución provisional
17. 17
¿Quién ha obtenido el Sello de Calidad FECYT?
395 revistas cuentan con el Sello de Calidad tras la resolución provisional de la VI Convocatoria (mayo 2019)
Las áreas de Ciencias Sociales y Humanidades quedan
especialmente representadas, a través de una acreditación
de su calidad, de manera constantemente actualizada con
renovaciones periódicas del Sello de Calidad
2064 revistas evaluadas, de las cuales 1035 son títulos únicos
Áreas y materias IV Conv R2015 R2016 V Conv VI Conv Total general
CIENCIAS SOCIALES 42 10 35 37 36 160
HUMANIDADES 41 9 19 53 54 176
CIENCIAS PURAS 12 6 3 9 1 31
CIENCIAS DE LA VIDA 4 3 4 11 6 28
Total general 99 28 61 110 97 395
40%
45%
8%
7%
CIENCIAS SOCIALES
HUMANIDADES
CIENCIAS PURAS
CIENCIAS DE LA VIDA
18. 18
¿Quién ha obtenido el Sello de Calidad FECYT?
113
92
83
29
28
19
17
7
6
1
Campo 7. Ciencias Sociales, Políticas, del Comportamiento y de la Educación
Campo 11. Filosofía, Filología y Lingüística
Campo 10. Historia, Geografía y Artes
Campo 5. Ciencias de la Naturaleza
Campo 9. Derecho y Jurisprudencia
Campo 4. Ciencias Biomédicas
Campo 8. Ciencias Económicas y Empresariales
Campo 6. Ingenierías y Arquitectura
Campo 1. Matemáticas y Física
Campo 2. Química
19. 19
Propuesta FECYT
2006: Inicio del
proyecto ARCE
2012: reunión con
Agencias de
Evaluación.
Presentación Sello
FECYT y necesidades
agencias
2015: reuniones con
ANECA sobre el
diseño de un
instrumento que
clasifique las
revistas Sello FECYT
2016: Sello de
Calidad de Ediciones
Académicas UNE-
ANECA-FECYT
2016: FECYT elabora
guía metodológica
clasificación CCSS y
HUM y presentación
a Agencias de
evaluación. I
convocatoria Sello
UNE
2017-2018:
Convocatoria de
evaluación
actualizada con
nuevos criterios.
OBJETIVO: que las agencias de evaluación dispongan de instrumentos de
acreditación de la calidad de las publicaciones para que puedan utilizarlos
como indicio de calidad en las evaluaciones curriculares*