SlideShare una empresa de Scribd logo
1 de 51
Por qué NO debemos centrarnos en el impacto y menos en el factor de impacto para evaluar los resultados de la investigación: cambiando los incentivos ,[object Object]
INTRODUCCIÓN ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
Dos conceptos fundamentales ,[object Object],[object Object],[object Object],[object Object],[object Object]
[object Object],[object Object],[object Object],[object Object],Algunos incentivos pueden ser muy exitosos, aunque no queramos aceptarlo Incentivo 1 (moral): Bienestar del paciente Incentivo 2 (económico): Bienestar del médico
Ruta de navegación ,[object Object],[object Object],[object Object],[object Object],[object Object]
¿Qué factor de impacto tiene la revista en que publicaste? ,[object Object],[object Object],[object Object],[object Object]
Lowry vs. Rada ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],Miguel de Cervantes y Saavedra
¿Qué factor de impacto tiene la revista en que publicaste? ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
Article-level metrics ,[object Object],[object Object]
¿citaciones = impacto? ,[object Object],[object Object],[object Object]
Limitaciones prácticas de las citaciones ,[object Object],[object Object],[object Object]
Tiempo
El gran problema…los autores ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
 
¿Cómo se construye el conocimiento? Afirmación:  Beta amiloide se encuentra presente en las fibras musculares en la miositis por cuerpos de inclusión Greengberg SA. How citation distortions create unfounded authority: analysis of a citation network. BMJ 2009;339:b2680
El que esté libre de pecado, que arroje la primera piedra ,[object Object],[object Object],[object Object],[object Object]
[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
Los riesgos de la endogamia ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
… y por si esto fuera poco ¿Inocente o culpable?
[object Object],[object Object],[object Object],[object Object],[object Object]
… en un mundo ideal ,[object Object],[object Object],[object Object],[object Object],[object Object]
Citaciones no es = a Impacto ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
Impactos e impactos (investigadores) Impacto absolutamente negativo Establece verdad irrefutable (y beneficia a población) Hipótesis completamente errada Refuta hallazgos de otros estudios Refuerza hipótesis de otros estudios Genera conocimiento cierto en su área Genera conocimiento cierto, extrapolable a otras áreas
Impacto en investigadores  =  ¿aporte al conocimiento? ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
Otras formas de medir impacto ,[object Object]
Otras formas de medir impacto ,[object Object]
Otras formas de medir impacto
Rating y comentarios
El gran problema: Los incentivos Iniciativa avanza mucho más lento de los esperado ¿Qué gana un investigador con contribuir, comentar, etc?
 
Citaciones: Más allá de la revista
Web 2.0: Aprovechando lo existente ,[object Object],[object Object]
¿Cuáles son las posibilidades? ,[object Object],[object Object],[object Object]
Marcadores sociales (social bookmarking) ,[object Object],[object Object],[object Object],[object Object]
citeulike
Connotea
CITEULIKE ,[object Object],[object Object]
El gran problema: Los incentivos Iniciativa avanza mucho más lento de los esperado ¿Qué gana un investigador con contribuir, comentar, etc?
Stack overflow: Acumulando Karma ,[object Object]
Impacto vs Calidad No aporta (retrocede) Aporta claramente Hipótesis completamente errada Refuta hallazgos de otros estudios Refuerza hipótesis de otros estudios Genera conocimiento cierto en su área Genera conocimiento cierto, extrapolable a otras áreas
2 tipos de error ,[object Object],[object Object]
Definición de sesgo ,[object Object],[object Object]
¿Es aceptable el error? ,[object Object],[object Object],[object Object],[object Object]
Cambiando los incentivos ,[object Object],[object Object],[object Object],[object Object]
Desafíos ,[object Object],[object Object],[object Object],[object Object]
¿Quién podrá ayudarnos? ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
Sir John Sulston ,[object Object],[object Object]
Richard Horton ,[object Object],[object Object],[object Object]
 
¿Cómo combatir este circulo vicioso? Muchas gracias… y se abre la discusión.

Más contenido relacionado

Similar a Por qué NO debemos centrarnos en el impacto y menos en el factor de impacto para evaluar los resultados de la investigación: cambiando los incentivos (Simposio Enero 2010)

Jaz planteamiento de la pregunta de investigación
Jaz planteamiento de la pregunta de investigaciónJaz planteamiento de la pregunta de investigación
Jaz planteamiento de la pregunta de investigación
Adiecs Unmsm
 
Lista de cotejo lectura critica.docx
Lista de cotejo lectura critica.docxLista de cotejo lectura critica.docx
Lista de cotejo lectura critica.docx
Mary Mera Espinoza
 
Comunicación científica (xiii) dónde publicar
Comunicación científica (xiii) dónde publicarComunicación científica (xiii) dónde publicar
Comunicación científica (xiii) dónde publicar
Javier González de Dios
 
El articulo cientifico
El articulo cientificoEl articulo cientifico
El articulo cientifico
marmer222
 
El articulo cientifico
El articulo cientificoEl articulo cientifico
El articulo cientifico
marmer222
 
El articulo cientifico
El articulo cientificoEl articulo cientifico
El articulo cientifico
marmer222
 

Similar a Por qué NO debemos centrarnos en el impacto y menos en el factor de impacto para evaluar los resultados de la investigación: cambiando los incentivos (Simposio Enero 2010) (20)

Jaz planteamiento de la pregunta de investigación
Jaz planteamiento de la pregunta de investigaciónJaz planteamiento de la pregunta de investigación
Jaz planteamiento de la pregunta de investigación
 
Diapos tema 2
Diapos tema 2Diapos tema 2
Diapos tema 2
 
Búsqueda bibliográfica en internet
Búsqueda bibliográfica  en internetBúsqueda bibliográfica  en internet
Búsqueda bibliográfica en internet
 
Evaluacion clinica
Evaluacion clinicaEvaluacion clinica
Evaluacion clinica
 
MBE USMP.pptx
MBE USMP.pptxMBE USMP.pptx
MBE USMP.pptx
 
Lista de cotejo lectura critica.docx
Lista de cotejo lectura critica.docxLista de cotejo lectura critica.docx
Lista de cotejo lectura critica.docx
 
Comunicación científica (xiii) dónde publicar
Comunicación científica (xiii) dónde publicarComunicación científica (xiii) dónde publicar
Comunicación científica (xiii) dónde publicar
 
Psicología clínica conceptos
Psicología clínica conceptosPsicología clínica conceptos
Psicología clínica conceptos
 
Modelo MBE.pdf
 Modelo MBE.pdf Modelo MBE.pdf
Modelo MBE.pdf
 
Ejemplo de lectura crítica: Importa fondo y forma
Ejemplo de lectura crítica: Importa fondo y formaEjemplo de lectura crítica: Importa fondo y forma
Ejemplo de lectura crítica: Importa fondo y forma
 
7 metodología investigación completaa
7  metodología investigación completaa7  metodología investigación completaa
7 metodología investigación completaa
 
Taller de investigación Primera Semana.pdf
Taller de investigación Primera Semana.pdfTaller de investigación Primera Semana.pdf
Taller de investigación Primera Semana.pdf
 
Ebe
EbeEbe
Ebe
 
0616Uni1Art2Phares (1).pdf
0616Uni1Art2Phares (1).pdf0616Uni1Art2Phares (1).pdf
0616Uni1Art2Phares (1).pdf
 
Lectura crítica de trabajos científicos en medicina / Critical reading of sci...
Lectura crítica de trabajos científicos en medicina / Critical reading of sci...Lectura crítica de trabajos científicos en medicina / Critical reading of sci...
Lectura crítica de trabajos científicos en medicina / Critical reading of sci...
 
Psicología clínica metodos de investigación
Psicología clínica metodos de investigaciónPsicología clínica metodos de investigación
Psicología clínica metodos de investigación
 
Emilio delgado lopez cozar indicadores de calidad de las publicaciones cientí...
Emilio delgado lopez cozar indicadores de calidad de las publicaciones cientí...Emilio delgado lopez cozar indicadores de calidad de las publicaciones cientí...
Emilio delgado lopez cozar indicadores de calidad de las publicaciones cientí...
 
El articulo cientifico
El articulo cientificoEl articulo cientifico
El articulo cientifico
 
El articulo cientifico
El articulo cientificoEl articulo cientifico
El articulo cientifico
 
El articulo cientifico
El articulo cientificoEl articulo cientifico
El articulo cientifico
 

Último

BOLETIN DIA MUNDIAL DE LA HIPERTENSIÓN.pptx
BOLETIN DIA MUNDIAL DE LA  HIPERTENSIÓN.pptxBOLETIN DIA MUNDIAL DE LA  HIPERTENSIÓN.pptx
BOLETIN DIA MUNDIAL DE LA HIPERTENSIÓN.pptx
MariaBravoB1
 
Pediatría en Red 5. temas de pediatria. Pediatria en red, temas de pediatria ...
Pediatría en Red 5. temas de pediatria. Pediatria en red, temas de pediatria ...Pediatría en Red 5. temas de pediatria. Pediatria en red, temas de pediatria ...
Pediatría en Red 5. temas de pediatria. Pediatria en red, temas de pediatria ...
JulietaLopez96
 
Diabetes Mellitus 2024 y fisiologia y datos.pdf
Diabetes Mellitus 2024 y fisiologia y datos.pdfDiabetes Mellitus 2024 y fisiologia y datos.pdf
Diabetes Mellitus 2024 y fisiologia y datos.pdf
AbelPerezB
 
Clase 17 Artrologia MMII 3 de 3 (Pie) 2024 (1).pdf
Clase 17 Artrologia MMII 3 de 3 (Pie) 2024 (1).pdfClase 17 Artrologia MMII 3 de 3 (Pie) 2024 (1).pdf
Clase 17 Artrologia MMII 3 de 3 (Pie) 2024 (1).pdf
garrotamara01
 

Último (20)

asma bronquial- nuevo enfoque GINA y GEMA
asma bronquial- nuevo enfoque  GINA y GEMAasma bronquial- nuevo enfoque  GINA y GEMA
asma bronquial- nuevo enfoque GINA y GEMA
 
BOLETIN DIA MUNDIAL DE LA HIPERTENSIÓN.pptx
BOLETIN DIA MUNDIAL DE LA  HIPERTENSIÓN.pptxBOLETIN DIA MUNDIAL DE LA  HIPERTENSIÓN.pptx
BOLETIN DIA MUNDIAL DE LA HIPERTENSIÓN.pptx
 
666105651-Farmacologia-Rios-2-Editorial-Sketch-Med-2024.pdf
666105651-Farmacologia-Rios-2-Editorial-Sketch-Med-2024.pdf666105651-Farmacologia-Rios-2-Editorial-Sketch-Med-2024.pdf
666105651-Farmacologia-Rios-2-Editorial-Sketch-Med-2024.pdf
 
Uso Racional del medicamento prescripción
Uso Racional del medicamento prescripciónUso Racional del medicamento prescripción
Uso Racional del medicamento prescripción
 
Pediatría en Red 5. temas de pediatria. Pediatria en red, temas de pediatria ...
Pediatría en Red 5. temas de pediatria. Pediatria en red, temas de pediatria ...Pediatría en Red 5. temas de pediatria. Pediatria en red, temas de pediatria ...
Pediatría en Red 5. temas de pediatria. Pediatria en red, temas de pediatria ...
 
PATTON Estructura y Funcion del Cuerpo Humano (2).pdf
PATTON Estructura y Funcion del Cuerpo Humano (2).pdfPATTON Estructura y Funcion del Cuerpo Humano (2).pdf
PATTON Estructura y Funcion del Cuerpo Humano (2).pdf
 
317543696-CUMARINA-EXPOSICION-ORGANICA4.pptx
317543696-CUMARINA-EXPOSICION-ORGANICA4.pptx317543696-CUMARINA-EXPOSICION-ORGANICA4.pptx
317543696-CUMARINA-EXPOSICION-ORGANICA4.pptx
 
Nutrición para el control de hipercolesterolemia e hiper trigliceridemia- Nut...
Nutrición para el control de hipercolesterolemia e hiper trigliceridemia- Nut...Nutrición para el control de hipercolesterolemia e hiper trigliceridemia- Nut...
Nutrición para el control de hipercolesterolemia e hiper trigliceridemia- Nut...
 
LA MEDICINA GRECORROMANA HIPOCRATES, HEROFILO Y GALENO
LA MEDICINA GRECORROMANA HIPOCRATES, HEROFILO Y GALENOLA MEDICINA GRECORROMANA HIPOCRATES, HEROFILO Y GALENO
LA MEDICINA GRECORROMANA HIPOCRATES, HEROFILO Y GALENO
 
10847862 LA HOMEOPATIA, DEFINICON DE .ppt
10847862 LA HOMEOPATIA, DEFINICON DE .ppt10847862 LA HOMEOPATIA, DEFINICON DE .ppt
10847862 LA HOMEOPATIA, DEFINICON DE .ppt
 
ENFERMEDADES CEREBROVASCULARES (1).pdfseminario
ENFERMEDADES CEREBROVASCULARES (1).pdfseminarioENFERMEDADES CEREBROVASCULARES (1).pdfseminario
ENFERMEDADES CEREBROVASCULARES (1).pdfseminario
 
ESCALAS DE VALORACION EN ENFERMERIA.pptx
ESCALAS DE VALORACION EN ENFERMERIA.pptxESCALAS DE VALORACION EN ENFERMERIA.pptx
ESCALAS DE VALORACION EN ENFERMERIA.pptx
 
Cuadernillo de depresion. ejercicios practicos
Cuadernillo de depresion. ejercicios practicosCuadernillo de depresion. ejercicios practicos
Cuadernillo de depresion. ejercicios practicos
 
Presentación ojo anatomía Quiroz en pdf
Presentación ojo anatomía Quiroz en pdfPresentación ojo anatomía Quiroz en pdf
Presentación ojo anatomía Quiroz en pdf
 
Diabetes Mellitus 2024 y fisiologia y datos.pdf
Diabetes Mellitus 2024 y fisiologia y datos.pdfDiabetes Mellitus 2024 y fisiologia y datos.pdf
Diabetes Mellitus 2024 y fisiologia y datos.pdf
 
(2024-09-05) Mutilacion genital femenina (DOC).docx
(2024-09-05) Mutilacion genital femenina (DOC).docx(2024-09-05) Mutilacion genital femenina (DOC).docx
(2024-09-05) Mutilacion genital femenina (DOC).docx
 
Cuadro comparativo de las enfermedades exantematicas 2022.docx
Cuadro comparativo de las enfermedades exantematicas 2022.docxCuadro comparativo de las enfermedades exantematicas 2022.docx
Cuadro comparativo de las enfermedades exantematicas 2022.docx
 
Benzodiazepinas en anestesiologia generalidades.pptx
Benzodiazepinas en anestesiologia generalidades.pptxBenzodiazepinas en anestesiologia generalidades.pptx
Benzodiazepinas en anestesiologia generalidades.pptx
 
ANAMNESIS Y EXAMEN FISICO DEL SISTEMA RENAL.pptx
ANAMNESIS Y EXAMEN FISICO DEL SISTEMA  RENAL.pptxANAMNESIS Y EXAMEN FISICO DEL SISTEMA  RENAL.pptx
ANAMNESIS Y EXAMEN FISICO DEL SISTEMA RENAL.pptx
 
Clase 17 Artrologia MMII 3 de 3 (Pie) 2024 (1).pdf
Clase 17 Artrologia MMII 3 de 3 (Pie) 2024 (1).pdfClase 17 Artrologia MMII 3 de 3 (Pie) 2024 (1).pdf
Clase 17 Artrologia MMII 3 de 3 (Pie) 2024 (1).pdf
 

Por qué NO debemos centrarnos en el impacto y menos en el factor de impacto para evaluar los resultados de la investigación: cambiando los incentivos (Simposio Enero 2010)

  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 14.
  • 15.  
  • 16. ¿Cómo se construye el conocimiento? Afirmación: Beta amiloide se encuentra presente en las fibras musculares en la miositis por cuerpos de inclusión Greengberg SA. How citation distortions create unfounded authority: analysis of a citation network. BMJ 2009;339:b2680
  • 17.
  • 18.
  • 19.
  • 20. … y por si esto fuera poco ¿Inocente o culpable?
  • 21.
  • 22.
  • 23.
  • 24. Impactos e impactos (investigadores) Impacto absolutamente negativo Establece verdad irrefutable (y beneficia a población) Hipótesis completamente errada Refuta hallazgos de otros estudios Refuerza hipótesis de otros estudios Genera conocimiento cierto en su área Genera conocimiento cierto, extrapolable a otras áreas
  • 25.
  • 26.
  • 27.
  • 28. Otras formas de medir impacto
  • 30. El gran problema: Los incentivos Iniciativa avanza mucho más lento de los esperado ¿Qué gana un investigador con contribuir, comentar, etc?
  • 31.  
  • 32. Citaciones: Más allá de la revista
  • 33.
  • 34.
  • 35.
  • 38.
  • 39. El gran problema: Los incentivos Iniciativa avanza mucho más lento de los esperado ¿Qué gana un investigador con contribuir, comentar, etc?
  • 40.
  • 41. Impacto vs Calidad No aporta (retrocede) Aporta claramente Hipótesis completamente errada Refuta hallazgos de otros estudios Refuerza hipótesis de otros estudios Genera conocimiento cierto en su área Genera conocimiento cierto, extrapolable a otras áreas
  • 42.
  • 43.
  • 44.
  • 45.
  • 46.
  • 47.
  • 48.
  • 49.
  • 50.  
  • 51. ¿Cómo combatir este circulo vicioso? Muchas gracias… y se abre la discusión.

Notas del editor

  1. Cualquier definición que se utilice, incluye como objetivo principal del la ciencia, el generar conocimiento La palabra ciencia se utilizó para traducir EPISTEMONIKOS en la ética de Aristóteles La palabra u Επιστημη
  2. Los incentivos son
  3. 1. La importancia de evaluar los méritos de un artículo individual 2. Falencias de un sistema basado en citaciones 3. Diferencia entre citación e impacto 4. Por qué medir el impacto es insuficiente (y eventualmente perjudicial) 5. Posibles soluciones
  4. Primero que nada: - Existe un gran problema. Evidente. Pero que a pesar de su tamaño, a veces pasa desapercibido. Gran parte de lo que se discutirá de aquí en adelante, en especial las soluciones, requiere temer muy presente este aspecto. Como dicen los anglosajones, “there’s an elephant in the room”…y partiré hablando de él.
  5. Oliver Lowry
  6. Un artículo muy relevante
  7. Si pretendemos que la citación refleje como un artículo genera nuevo conocimiento, lo mínimo que podemos pedir es que la cita sea correcta.
  8. The belief system studied is that a protein, β amyloid, known for its role in injuring brain in Alzheimer’s disease, is also produced by and injures skeletal muscle fibres in the muscle disease sporadic inclusion body myositis. This belief system was chosen for analysis because of its importance to the care of patients with inclusion body myositis, as this view seems to be accepted by many as likely or established fact (at least 200 different journal articles have stated such), with β amyloid production often reported to be a central element in the pathogenesis of the disease (see web extra note 1), and directs research and treatment trials in the specialty. The approach taken here was simply to collect all statements in the medical literature on this belief system and to study the pattern of citation among them—that is, how each statement is supported by reference to other papers.
  9. … y todos sabemos lo que resulta de las relaciones endogámicas. … algo absolutamente alejado del objetivo inicial.
  10. Y todos se estarán preguntando que papel juega Thomson Reuter, la empresa que produce el factor de impacto.
  11. Cualquier sistema basado en citaciones
  12. Una pequeña introducción a otras formas de medir impacto.
  13. … cómo ya mencioné anteriormente…existe una iniciativa, que ha producido un gran entusiasmo,  PLoS
  14. A pesar que el ethos de la ciencia se basa fuertemente en colaborar y compartir…
  15. A pesar que el ethos de la ciencia se basa fuertemente en colaborar y compartir…
  16. Cualquier sistema basado en citaciones
  17. Si pudiera deshacerme del factor de impacto mañana, lo haría. Lo odio. No lo inventé ni lo solicité. Distorsiona totalmente la toma de decisiones y es una muy, pero muy mala influencia en la ciencia. El incentivo para mi es cortar completamente la investigación proveniente de la parte del mundo que tiene los mayores problemas de salud…las citaciones crean una cultura racista en la toma de decisiones editoriales de las revistas, y encarna un sistema que es solo acerca de nosotros (el mundo desarrollado)