Los titulares de salud están destinados a llamar nuestra atención. Un titular reciente promociona los efectos del chocolate amargo en la pérdida de peso. Esto suena muy bien, pero hay fallas fundamentales en esta investigación que probablemente la hagan inútil.
Pero estos defectos también pueden ser una ventaja al darnos la oportunidad de hacer un análisis y aprender mucho sobre la investigación. Pero no se preocupe: este artículo no será demasiado doloroso de leer, y de hecho puede haber chocolate para perder peso. si lo haces hasta el final.
«Los científicos dicen» no siempre es garantía de verdad
Johannes Bohannon publicó un estudio en los Archivos Internos de Medicina que compara tres grupos de personas con la dieta:
Estos participantes siguieron su dieta durante 21 semanas. Los investigadores informaron que los grupos bajos en carbohidratos y bajos en carbohidratos y chocolate perdieron más peso que el grupo de control.
Pero antes de empezar a comer chocolate, necesitamos profundizar en el estudio y ordenar un pequeño lado de las estadísticas.
Muchas personas tienden a ignorar las secciones de resultados de los artículos de investigación porque están plagadas de terminología estadística, como?T (67) – 2. 1, p
El valor p es simplemente la probabilidad de que no haya ningún efecto. Si este valor es pequeño (digamos, menos del 5%), decimos que hemos encontrado algo. Específicamente, pero no gramaticalmente correcto, decimos: «Probablemente no tenemos nada . «
Los científicos a menudo están muy orgullosos de sus diminutos valores p y verá declaraciones como?P. 00001. ? Puede parecer un poco atrasado decir que probablemente no tenemos nada, pero así es como funciona este tipo de pruebas. Equivale a decir, ‘Inocente hasta que se demuestre lo contrario’, pero podemos probar nuestra culpa si tenemos un 5% de probabilidad o menos de inocencia.
Pero cuanto más hagamos pruebas, más tendremos un valor p bajo o un efecto significativo. Es como tener un billete de lotería. Si solo tengo uno, tengo muy pocas posibilidades de ganar. Si tienes sesenta billetes de lotería, tus posibilidades de ganar son mucho mejores que las mías. Cuando probamos muchos resultados diferentes, es como tener muchos billetes de lotería. Existe la posibilidad de que encontraremos un resultado significativo que no es real (un falso positivo). Ésta es una de las limitaciones de este tipo de prueba en que hacemos una estimación basada en la probabilidad.
El investigador del artículo sobre el chocolate probó una gran cantidad de efectos (en muchas ocasiones), es decir, tenía cientos de billetes de lotería y tenía que encontrar algo importante, para ponerlo en términos de valor p, si tengo cien pruebas, en promedio, cinco serían significativas (de ahí viene el 5%), por lo que los tres o cuatro efectos que mencionan en el artículo podrían ser falsos positivos.
En este caso, el investigador tenía cientos de billetes de lotería, por lo que estaba seguro de encontrar algo importante.
Una de las primeras cosas que descubren los jóvenes investigadores es cuando un estudio tiene una muestra pequeña, que no es inherentemente mala. Sin embargo, no son tan precisos como muestras grandes.
En una muestra pequeña, podríamos encontrar a la persona extraña que es bastante diferente a todos los demás. Esta persona puede rechazar los resultados (piense en la persona en su gimnasio que sobresale de inmediato). En una muestra grande, es más probable que equilibrar a las personas extremas. De esa manera, sus estimaciones serían más precisas.
El estudio del chocolate tiene muchos problemas con los métodos estadísticos que son demasiado densos para este artículo, pero uno es que no mencionan el tamaño de su muestra en ninguna parte del documento. Podemos retroceder el tamaño de su muestra mirando la p valores y el tipo de prueba utilizada. Según mis estimaciones, no había más de veinte personas en este estudio (dependiendo de cómo las distribuyeran en los tres grupos).
Por lo tanto, una persona podría haber liderado los resultados cuando el grupo de chocolate mejoró (nuevamente, imagine a la persona en el gimnasio que sobresale sin importar el ejercicio que haga) . Si, por otro lado, estos resultados son ciertos, entonces el efecto del chocolate se verá cuando otro investigador haga otro estudio.
Podemos ver una ciencia similar en el Informe de 1998 en Lancet de que las vacunas MMR estaban relacionadas con la incidencia del autismo. Este estudio tuvo solo doce participantes y esta correlación entre los dos no se pudo replicar en estudios más grandes (además, el artículo original fue escrito porque la investigación principal falsificó los datos), sin embargo, este falso positivo lleva a muchos padres a evitar vacunar a sus hijos.
Desafortunadamente, el estudio reciente no justificó realmente el consumo diario de chocolate.
La publicación de la investigación es la moneda que paga las facturas en las universidades. Tener más publicaciones lleva a un investigador a estar más arriba en la cadena alimentaria de un departamento universitario. Los periódicos funcionan como un negocio donde la gente paga por publicar.
Estas revistas suelen ser utilizadas por universidades en línea marginales que están tratando de ganar credibilidad. Compare esto con las revistas líderes, donde la tasa de rechazo es a menudo del 99%, y puede llevar meses (o años) recibir una respuesta en un manuscrito enviado ya que pasa por varias revisiones. Al revisar, podemos ver que el estudio sobre el chocolate fue publicado en una revista de acceso abierto que factura por manuscrito (traté de enviar un manuscrito y me ofrecieron el método de prepago por 600?).
No culpo a las revistas por tener un modelo de negocio, sin embargo, con este tipo de modelo de negocio, muchas veces renuncian a los rigores de las revistas científicas más selectivas, todos mis manuscritos han pasado por un difícil proceso de revisión por parte de críticos y editoriales. hizo que cada artículo fuera mucho más valioso científicamente.
Los editores y críticos están ahí para ser los guardianes de la ciencia. Si no tenemos estas salvaguardas, pueden publicarse muchos otros artículos científicos marginales. El estudio del chocolate carece de muchas descripciones clave, que no habría dejado pasar si fuera un crítico. Dudo que el artículo haya sido revisado incluso antes de su publicación.
El estudio sobre el chocolate y la pérdida de peso ya ha sido retirado.
El estudio sobre el chocolate y la pérdida de peso ya ha sido retirado. Los resultados de este estudio son sospechosos por las razones mencionadas anteriormente, pero por supuesto, la retractación genera más sospechas (J. Bohannon es un periodista que ha escrito mucho sobre el sesgo mediático). de informes científicos y podría haber sido retirado por este motivo).
Las imágenes de este artículo, tomadas de las principales revistas de fitness, son ejemplos de cómo se publica esta investigación; los artículos se pueden tomar y difundir sin un ojo crítico; el artículo sobre el chocolate es solo un ejemplo, pero sin mirar demasiado, podríamos encontrar muchos otros que hacen afirmaciones escandalosas que resultan no ser tan espectaculares cuando se examina la investigación original. Mi sugerencia es tomar cada título con escepticismo y luego revisar la búsqueda original.
A veces es fácil lanzar las manos al aire y darse por vencido ante todos los titulares en conflicto. Tomo cada título con un poco de escepticismo. Considero que son una pieza del rompecabezas. Necesito recopilar mucho más antes de poder tomar una decisión informada. Si recopilo varias piezas del rompecabezas (estudios de investigación) que convergen en un solo elemento, entonces me siento más seguro en el resultados.
No quiero descartar todos los resultados de este estudio sobre el chocolate, sin embargo, me gustaría ver estudios similares que muestren resultados similares. Además, necesitamos ver cómo encajan estas piezas con otras partes. ¿El chocolate funciona solo en combinación con una dieta baja en carbohidratos u otras combinaciones?Necesitamos ver muchas más piezas de rompecabezas antes de tomar una decisión.
Más como esto
1. J. Bohannon et al. » Chocolate con alto contenido de cacao como acelerador de la pérdida de peso». Instituto de Alimentación y Salud, Vol. 8 No. 55, 2015.
2. Wakefield Andrew, Murch S, Anthony A et al. » Hiperplasia ileal-linfoide-nodular, colitis inespecífica y trastorno del desarrollo invasivo en niños». Lancet 351 (9103): 637?41. 1998.
Fotos 4 cortesía de Shutterstock.