Respuesta corta
- Demasiadas exenciones . Los requisitos legales para informar los resultados de los ensayos clínicos completados contienen tantas excepciones que la mayoría de los ensayos ingresados en Inicio – ClinicalTrials.gov están exentos.
- La aplicación es muy laxa . La FDA de EE. UU. Y los NIH tienen la tarea de hacer cumplir estas reglas de informes, pero no solo ellos mismos las incumplen, sino que también hacen poco para garantizar el cumplimiento. Por ejemplo, una investigación de 2015 (1) encontró que ni un solo investigador ni patrocinador de un ensayo había sido multado o sancionado desde que la ley entró en vigencia en 2008.
Under-reporting de resultados de ensayos clínicos: un problema crónico de proporciones epidémicas
La falta de informes de los resultados de los ensayos clínicos ha sido crónica y generalizada durante décadas (2).
Un análisis de 2016 (3) del destino de 5918 resúmenes presentados en las reuniones anuales de la Sociedad Americana de Anestesiólogos de 2001 a 2004 descubrió
- 1052 presentaron resultados de ECA humanos.
- Solo el 54% , 568 de 1052, se publicaron dentro de los 10 años posteriores a la presentación inicial.
- Los ECA con datos positivos (definidos como uno que muestra un resultado estadísticamente significativo a favor del grupo experimental) tuvieron un 42% más de probabilidades de ser publicados en comparación con aquellos con datos negativos.
- A pesar de los datos positivos o negativos, la mayoría de estos estudios fueron pequeños con una mediana de 40 a 50 participantes, lo que solo agrega un insulto a la lesión. No solo el alcance de la falsa inferencia ya es considerable, sino que tales inferencias se obtendrían a partir de porciones minúsculas y totalmente no representativas del todo, lo que aumentaría enormemente el alcance de los falsos positivos (4).
Un análisis de 2016 (5) de medicamentos y productos biológicos evaluados en ensayos fundamentales de 1998 a 2008 encontrados
- 54% de ellos fallaron.
- Los resultados de la prueba se publicaron solo para el 40% de los que fracasaron.
Finalmente, la escala epidémica del problema llevó al gobierno de EE. UU. A promulgar la Ley de Enmiendas de la FDA de los Estados Unidos de 2007 (FDAAA), que (6, énfasis mío)
¿Son los lugares donde una compañía farmacéutica lleva a cabo ensayos conocidos para el público?
¿Qué significa exactamente ‘condición en estudio’?
¿Qué es lo que falta para que un medicamento de Alzheimer en un ensayo sea exitoso?
‘requiere que los resultados de los ensayos clínicos de medicamentos y dispositivos aprobados por la Administración de Alimentos y Medicamentos realizados en los Estados Unidos se pongan a disposición del público en Home – ClinicalTrials.gov dentro de 1 año de la finalización del ensayo, independientemente de si los resultados están publicados o no. no “.
Tanto prometido, tan poco logrado: las leyes no significan nada si no se aplican
Un análisis de 2016 (7) encontró que de 13327 ensayos clínicos completados o finalizados desde el 1 de enero de 2008 hasta el 31 de agosto de 2012,
- 51 instituciones académicas y sin fines de lucro publicaron resultados de ensayos clínicos en Inicio – ClinicalTrials.gov solo el 13% del tiempo, incluso dos años después de que hayan finalizado, cuando el requisito legal es hacerlo dentro del año posterior a la finalización.
- Los investigadores publicaron sus hallazgos en revistas médicas en dos años solo el 29% de las veces.
Un análisis de 2017 (8) de ensayos de cáncer de mama registrados en Home – ClinicalTrials.gov de 2000 a 2012 no encontró ninguna mejora en los informes. Más bien encontró
- Los ensayos con resultados estadísticamente significativos tienen más probabilidades de ser publicados.
- Falta de informes de los resultados de ensayos clínicos.
- Retraso en la publicación de resultados estadísticamente no significativos.
La situación no es muy diferente incluso para publicar los resultados de los ensayos en Home – ClinicalTrials.gov. Un estudio (9) examinó 17536 estudios con resultados publicados en Home – ClinicalTrials.gov, 2823 de los cuales se completaron ensayos aleatorizados de fase II o III.
- 1400 de 2823 ensayos completados (~ 50%) informaron la estimación del efecto del tratamiento y / o el valor de p. De estos, 844 (60%) tuvieron resultados estadísticamente significativos.
- 1423 ensayos solo publicaron datos sin informar los resultados, que, sin embargo, podrían calcularse, al menos en teoría. El cálculo fue posible para 929 (65%), no para 494 (35%), ya sea debido a informes insuficientes, censura de datos o mediciones repetidas. De estos 929, solo 342 (37%) tuvieron resultados estadísticamente significativos.
- La comparación clave es la gran diferencia en los resultados estadísticamente significativos entre los que publicaron su estimación del efecto del tratamiento y / o el valor de p ( 844 de 1400, 60% ) versus los que no ( 342 de 929, 37% ).
- Por lo tanto, el sesgo positivo de los resultados prevalece no solo en las publicaciones, sino incluso en el simple hecho de informarlas a Home – ClinicalTrials.gov.
- Irony está publicando resultados en Home – ClinicalTrials.gov es probablemente mucho más valioso para el público
- El sitio es de libre acceso en todo el mundo a diferencia de las revistas científicas que a menudo se ocultan detrás de los muros de pago exorbitantes.
- Un análisis de Plos Medicine 2013 (6) encontró publicado Home – ClinicalTrials.gov resultados de 212 estudios publicados fueron mucho más completos, especialmente en la notificación de eventos potencialmente adversos, información de vital importancia para los pacientes.
El sitio web estadounidense de noticias de salud Stat (sitio web) – Wikipedia, publicó los resultados de una investigación de 2015 (1) que mostró
- Los principales flouters no eran meramente prestigiosos como Memorial Sloan Kettering, Stanford, Eli Lilly y GlaxoSmithKline, sino irónicamente los mismos enforcers. Sí, incluso los NIH incumplieron rutinariamente la regla que supuestamente debe aplicar (ver más abajo de 1).
- Tal exposición de alto perfil captó la atención del Senado de los EE. UU. Con un senador que reprendió al NIH por no haber hecho su trabajo (10).
- Incluso entonces, el vicepresidente de los EE. UU., Joe Biden, pidió que se desfinanciara a los beneficiarios de subvenciones federales que no cumplieron con la ley.
- A corto plazo, los informes de los resultados de los ensayos clínicos aumentaron un 25% durante el mismo período en los años anteriores.
Más tarde, en 2016, el gobierno de EE. UU. Publicó nuevas reglamentaciones (11) que requieren informes públicos de muchos más ensayos clínicos, incluidos algunos para medicamentos y dispositivos que nunca llegan al mercado. El problema es que estas reglas no van lo suficientemente lejos. Hay demasiadas excepciones .
- Los ensayos ingresados a Inicio – ClinicalTrials.gov antes de 2008 están exentos.
- También lo son los ‘ estudios financiados con fondos privados, que incluyen pequeños ensayos que examinan solo la seguridad de un nuevo medicamento, pequeños estudios de factibilidad de dispositivos médicos y estudios de intervención conductual ‘ (1).
- Por lo tanto, las reglas solo se aplican a una fracción de los ensayos registrados.
- La investigación de noticias STAT 2015 (1) encontró que solo aplicaban a un mero 4.5% , ~ 9000 de ~ 200000 ensayos.
Rampant Publication bias – Wikipedia, definida como ” investigación publicada que sistemáticamente no es representativa de la población de estudios completados ” (12), y originalmente descrita en 1979 como el problema del archivador (13). Los sospechosos habituales de los empleadores (universidades, institutos académicos, biotecnología / farmacia, hospitales, centros médicos, etc.), editores de revistas, revisores, agencias de financiación, incluso los medios de comunicación, parecen seguir prefiriendo resultados positivos y novedosos. El costo de basar los tratamientos no en toda la imagen, sino en una porción pequeña y sesgada de la misma, es perjudicial para los pacientes (14, 15, 16, 17). Los tratamientos basados en un único ECA podrían resultar inútiles o incluso peligrosos (18).
Bibliografía
1. STAT, Charles Piller, 13 de diciembre de 2015. Pacientes en peligro a medida que se ignora la ley
2. Rotonda, Tavola. “Subestimar la investigación es mala conducta científica”. Jama 263 (1990): 1405 – 1408 .; Antes, Gerd, y Iain Chalmers. “La falta de informes de los ensayos clínicos no es ética”. The Lancet 361.9362 (2003): 978-979.
3. Chong, Simon W., y col. “La relación entre los hallazgos del estudio y el resultado de la publicación en la investigación de anestesia: un estudio observacional retrospectivo que examina el sesgo de publicación”. Canadian Journal of Anaesthesia / Journal canadien d’anesthésie 63.6 (2016): 682-690.
4. Dumas-Mallet, Estelle, et al. “Bajo poder estadístico en la ciencia biomédica: una revisión de tres dominios humanos de investigación”. Royal Society Open Science 4.2 (2017): 160254. http: //rsos.royalsocietypublishi…
5. Hwang, Thomas J., y col. “Fracaso de los fármacos en investigación en el desarrollo clínico de última etapa y publicación de los resultados del ensayo”. JAMA Internal Medicine 176.12 (2016): 1826-1833.
6. Riveros, Carolina, et al. “Calendario e integridad de los resultados de los ensayos publicados en ClinicalTrials. Gov y publicados en revistas”. PLoS Med 10.12 (2013): e1001566. http://journals.plos.org/plosmed…
7. Chen, Ruijun, y col. “Publicación y presentación de informes de resultados de ensayos clínicos: análisis de corte transversal en centros médicos académicos”. bmj 352 (2016): i637. http://www.bmj.com/content/bmj/3…
8. Song, Seung Yeon, y col. “La importancia del resultado del ensayo se asoció con la tasa de publicación y el tiempo de publicación”. Journal of Clinical Epidemiology (2017).
9. Dechartres, Agnes, et al. “Informes de resultados estadísticamente significativos en ClinicalTrials. Gov para ensayos controlados aleatorios de superioridad completados”. BMC medicine 14.1 (2016): 192. Informes de resultados estadísticamente significativos en ClinicalTrials.gov para ensayos controlados aleatorios de superioridad completados
10. STAT, Charles Piller, 19 de febrero de 2016. El Senador Charles Grassley insta a mejores informes de ensayos clínicos
11. https://s3.amazonaws.com/public-…
12. Rothstein HR, Sutton AJ, Borenstein M. Sesgo de publicación en el metanálisis. En: Rothstein HR, Sutton AJ, Borenstein M (Eds). Sesgo de publicación en metanálisis: prevención, evaluación y ajustes. John Wiley & Sons, Inc. 2006.
13. Rosenthal, Robert. “El problema del archivador y la tolerancia para resultados nulos”. Boletín psicológico 86.3 (1979): 638. http://datacolada.org/wp-content…
14. Horton, Richard. “Fuera de línea: ¿Cuál es el 5 sigma de la medicina?” The Lancet 385.9976 (2015): 1380. http://www.thelancet.com/pdfs/jo…
15. Smaldino, Paul E. y Richard McElreath. “La selección natural de la mala ciencia”. Royal Society Open Science 3.9 (2016): 160384. https://www.researchgate.net/pro…
16. Higginson, Andrew D. y Marcus R. Munafò. “Los incentivos actuales para los científicos conducen a estudios de bajo poder estadístico con conclusiones erróneas”. PLoS Biology 14.11 (2016): e2000995. http://journals.plos.org/plosbio…
17. Nissen, Silas Boye, et al. “Sesgo de publicación y la canonización de hechos falsos”. Elife 5 (2016): e21451. https://elifesciences.org/conten…
18. Prasad, Vinay, et al. “Una década de reversión: un análisis de 146 prácticas médicas contradictorias”. Actas de Mayo Clinic. Vol. 88. No. 8. Elsevier, 2013. https://www.researchgate.net/pro…