Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en...

22
Problemas con la evidencia Problemas con la evidencia en la práctica clínica en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado Profesor Asociado Facultad de Medicina Facultad de Medicina Universidad Nacional de Colombia Universidad Nacional de Colombia

Transcript of Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en...

Page 1: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Problemas con la evidencia Problemas con la evidencia en la práctica clínicaen la práctica clínicaJavier H. Eslava-Schmalbach, MD, MSc, PhDJavier H. Eslava-Schmalbach, MD, MSc, PhD

Profesor AsociadoProfesor AsociadoFacultad de MedicinaFacultad de Medicina

Universidad Nacional de ColombiaUniversidad Nacional de Colombia

Page 2: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

post-popperianospost-popperianos observaciones observaciones

erroneaserroneas no estructura lógica no estructura lógica

(predecir con lo (predecir con lo observado)observado)

Investigador en Investigador en entorno social entorno social (comparaciones no (comparaciones no comparables)comparables)

Brown

ética - sesgos - estudio - análisis

Page 3: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Problemas con la evidenciaProblemas con la evidencia Los autoresLos autores

Los financiadoresLos financiadores

Lo que se investigaLo que se investiga

Lo que se publicaLo que se publica

Page 4: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Los autoresLos autores

Page 5: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Eslava, J. CEC. Universidad Nacional de Colombia

SesgoSesgo Algún proceso en una situación de Algún proceso en una situación de

inferencia que tiende a producir resultados inferencia que tiende a producir resultados o condiciones que difieren o condiciones que difieren sistemáticamente de la verdad. sistemáticamente de la verdad.

(Adaptado de Murphy, The Logic of Medicine, Baltimore, John Hopkins University Press,(Adaptado de Murphy, The Logic of Medicine, Baltimore, John Hopkins University Press,

1976.)1976.)  

Page 6: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado
Page 7: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Error Sistematico (Sesgo)Error Sistematico (Sesgo) EN LA SELECCIÓNEN LA SELECCIÓN

EN LA MEDICIONEN LA MEDICION

DE CONFUSIONDE CONFUSION

Page 8: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Sesgo diferente a Factor de Sesgo diferente a Factor de ConfusiónConfusión

Sesgo se evita Sesgo se evita • (siempre desvían sistemáticamente los (siempre desvían sistemáticamente los

resultados de la verdad)resultados de la verdad) Factor de confusión se controla, se Factor de confusión se controla, se

evita, se parea o se aleatoriza evita, se parea o se aleatoriza • (con esto se evita que se desvíen (con esto se evita que se desvíen

sistemáticamente los resultados de la sistemáticamente los resultados de la verdad)verdad)

Page 9: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Sesgos y diseñosSesgos y diseños

Selección Seguimiento Análisis Discusión Publicación

Exposición Desenlace Resultados Conclusiones

Page 10: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Eslava, J. CEC. Universidad Nacional de Colombia

E rro r Ale a to rioE rro r Ale a to rio

  En aleatorización pacientesEn aleatorización pacientes En la evaluación de los tratamientosEn la evaluación de los tratamientos En el muestreo de los pacientesEn el muestreo de los pacientes En las mediciones de los gruposEn las mediciones de los grupos

Page 11: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Eslava, J. CEC. Universidad Nacional de Colombia

Error Sistemático (Sesgo)Error Sistemático (Sesgo) Al c la s ific a r e nfe rm e da d (Dife re nte s Al c la s ific a r e nfe rm e da d (Dife re nte s

g rupo s pa ra inte rve nir)g rupo s pa ra inte rve nir)

(S us c e ptib ilida d o S e le c c ió n o Ma la (S us c e ptib ilida d o S e le c c ió n o Ma la C la s ific a c ió n)C la s ific a c ió n) (MU Y IMP O R T AN T E ) (MU Y IMP O R T AN T E )

Al inte rve nir Al inte rve nir (De s e m pe ño )(De s e m pe ño )••          

Page 12: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Corolarios IoannidisCorolarios Ioannidis

1. Entre más pequeños sean los 1. Entre más pequeños sean los estudios en un campo científico, estudios en un campo científico, menos probable que los hallazgos menos probable que los hallazgos de investigación sean ciertosde investigación sean ciertos

2. Entre más pequeño sea el tamaño 2. Entre más pequeño sea el tamaño del efecto en un campo científico, del efecto en un campo científico, menos probable que los hallazgos menos probable que los hallazgos sean ciertossean ciertos

Page 13: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Corolarios IoannidisCorolarios Ioannidis

3. Entre mayor sea el número y menor 3. Entre mayor sea el número y menor la selección de relaciones evaluadas, la selección de relaciones evaluadas, menos probable que los resultados menos probable que los resultados sean ciertossean ciertos

4. A mayor flexibilidad en el diseño, 4. A mayor flexibilidad en el diseño, las definiciones, los desenlaces y los las definiciones, los desenlaces y los tipos de análisis, menos probable tipos de análisis, menos probable que los hallazgos sean ciertosque los hallazgos sean ciertos

Page 14: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Corolarios IoannidisCorolarios Ioannidis

5. Entre mayores prejuicios o intereses 5. Entre mayores prejuicios o intereses financieros o de otro tiempo en el financieros o de otro tiempo en el campo científico, menos probable campo científico, menos probable que los resultados sean ciertos. que los resultados sean ciertos.

6. Entre más candente este un campo 6. Entre más candente este un campo científico (con mas equipos científico (con mas equipos compitiendo) menos probable que los compitiendo) menos probable que los resultados sean ciertos resultados sean ciertos

Page 15: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Los financiadoresLos financiadores

Page 16: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Los financiadoresLos financiadores Moleculas no rentables, no estudiadasMoleculas no rentables, no estudiadas

Conflicto de intereses en las nuevas Conflicto de intereses en las nuevas moleculasmoleculas

Publicación de solo resultados positivosPublicación de solo resultados positivos

Manipulación intencional de los estudiosManipulación intencional de los estudios

Page 17: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

EjemplosEjemplos LidocaínaLidocaína

• lidocaine AND arrythmia AND lidocaine AND arrythmia AND (effectiveness OR efficacy) + RCT : 51 (effectiveness OR efficacy) + RCT : 51 (13 en 10 años)(13 en 10 años)

• amiodarone AND arrythmia AND amiodarone AND arrythmia AND (effectiveness OR efficacy) + RCT : 139 (effectiveness OR efficacy) + RCT : 139 (80 en 10 años)(80 en 10 años)

Page 18: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

EjemplosEjemplos AdrenalinaAdrenalina

• adrenaline resuscitation (effectiveness adrenaline resuscitation (effectiveness OR efficacy) + RCT OR efficacy) + RCT 1414

VasopresinaVasopresina• vasopresina resuscitation (effectiveness vasopresina resuscitation (effectiveness

OR efficacy) + RCTOR efficacy) + RCT 22

Page 19: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Lo que se investigaLo que se investiga La industriaLa industria

La academiaLa academia

Los gobiernosLos gobiernos

Page 20: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

Lo que se publicaLo que se publica FinanciadoresFinanciadores

Lo que se investigaLo que se investiga

Lo que se publicaLo que se publica

Autores Autores

Evidencia ?

Page 21: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

SolucionesSoluciones

100% de falso vs. 100% de cierto100% de falso vs. 100% de cierto

Promover evidencia más poderosaPromover evidencia más poderosa(estudios grandes o meta-análisis con (estudios grandes o meta-análisis con

bajo sesgo)bajo sesgo)

Disminuir el sesgo mejorando los Disminuir el sesgo mejorando los estándares de investigaciónestándares de investigación

Page 22: Problemas con la evidencia en la investigación científica€¦ · Problemas con la evidencia en la práctica clínica Javier H. Eslava-Schmalbach, MD, MSc, PhD Profesor Asociado

SolucionesSoluciones Registro de protocolos de ensayos clínicosRegistro de protocolos de ensayos clínicos

Aprendiendo de los sesgos de otrosAprendiendo de los sesgos de otros

Involucrando a otros financiadoresInvolucrando a otros financiadores

Evitando o admitiendo el conflicto de Evitando o admitiendo el conflicto de interesesintereses

Guías de Práctica Clínica y Meta-análisisGuías de Práctica Clínica y Meta-análisis