Tres estudios científicos: el bueno, el feo y el malo

Siguiendo con mi manía personal de reflexionar sobre la buena o mala aplicación del método científico, y sobre todo de lo que nos ofrecen los medios de comunicación a ese respecto, me encuentro hoy con tres llamativas noticias en El País que merece la pena comentar, para descargar un poco la tensión que en los últimos días Zapatero, los malvados especuladores y la (merecida) victoria del Barça en la Liga han dejado en el ambiente:

• "Un estudio concluye que la pulsera Power Balance no mejora el equilibrio"
• "Los niños que comen más pan son más delgados"
• "Los fetos prefieren a Mozart; no les gustan el jazz ni el rock"

La primera cita un estudio de la Univ. Politécnica de Madrid encaminado a comprobar si la pulserita de los famo-tontos y de los tontos a secas, mejora o no mejora el equilibrio. Decir, en defensa del honrado cuerpo de ingenieros que se forman en dicha santa casa (entre los que me cuento), que el estudio lo realiza una tal Facultad de Ciencias de la Actividad Física y del Deporte, desconocida para mi hasta el momento, pero al parecer con bastante tiempo libre, como su propio nombre deja entrever...

La segunda noticia cita un estudio de una catedrática de Nutrición de la Univ. Complutense de Madrid.

La tercera no se refiere a un estudio concreto, sino a una entrevista con Thomas Verny, "psiquiatra de bebés y embarazos" (sic) en la que suelta esa perla y alguna otra similar, basándose en "sus experiencias".

Os voy a explicar por qué, a pesar de la apariencia un tanto frívola de las tres noticias (y por extensión de los estudios a los que hacen referencia), la primera me parece BUENA, la segunda FEA y la tercera MALA. Por supuesto, esta es mi opinión personal basada en los datos que se ofrecen en el desarrollo de la noticia, no conozco en detalle los estudios concretos, por lo que podría meter la pata en algún punto (esto lo digo por las posibles querellas, más que nada...)

• EL BUENO: Resulta que el estudio sobre la pulserita de marras parece cumplir con los pasos necesarios para sacar alguna conclusión relevante en este tipo de estudio: sistema de "doble ciego" (ni los voluntarios ni los experimentadores saben qué pulsera lleva holograma y cuál no, para no influir en los resultados), las pruebas de equilibrio están normalizadas, se utilizan instrumentos para objetivar lo que se entiende por "equilibrio", se hace un estudio estadístico final... y se concluye que "no hay evidencia de efecto en el equilibrio". Sin más. No se cuestiona si la pulsera incrementa la erección, o refuerza la autoestima, o te hace sentir más guapo, etc. Eso, lógicamente, requeriría un estudio ad-hoc similar al anterior.
• EL FEO: el segundo estudio concluye que "los niños que consumen más pan tienen menos sobrepeso y obesidad y mejores parámetros sanguíneos y de otros nutrientes." En el detalle de la noticia comprobamos que se toma una muestra de niños, y se relaciona su estado inicial con su ingesta de pan. Luego se hace una hipótesis teórica: si aumentamos la cantidad de pan en la dieta, los parámetros físicos mejorarán. A continuación se le aumenta una cantidad de pan a la dieta de una parte de la muestra, y se vuelven a analizar sus parámetros físicos para comprobar la validez de la hipótesis. Se encuentra que los parámetros han mejorado,y se llega a la conclusión de que el motivo es el pan. Pregunta para el lector: ¿soy el único que encuentra varios defectos en esta metodología? Insisto en que no tengo los detalles del estudio, pero sólo con lo que se deduce de la noticia, deberíamos concluir que éste no cumple adecuadamente el método científico: se hace una afirmación y se prepara un experimento para ver si dicha afirmación se cumple... pero no parece tenerse en cuenta el resto de posibilidades, como que el pan no sea el único factor, que la correlación pueda ser espúrea... ¿se ha comprobado si la afirmación también se cumple si aumentas la ingesta, pongamos por caso, de fresas silvestres en la dieta? Y si es así, cuál es el efecto relevante, el del pan o el de las fresas? ¿Se dice algo sobre la cantidad de pan a partir de la cual podemos esperar una mejora de los parámetros? ¿Se ha controlado la muestra por otros factores que pudieran introducir fuertes sesgos, como la herencia genética, etc. En fin, si este estudio no entra directamente en la categoría de MALO, es porque leemos (era de esperar) que está patrocinado por el sector del pan español, lo cual lo sitúa directamente en el apartado de FEO.
• EL MALO: de éste, que debería ser el feo a juzgar por la foto del interfecto, realmente desconozco los detalles de su trayectoria científica. Quizá Terapeuta pueda ofrecernos algo de luz. Pero si tenemos que juzgar sólo por lo que afirma en la entrevista, lo voy a catalogar de MALO porque las afirmaciones que lanza el tipo, basadas en experiencias personales cuando no directamente en "testimonios", rayan directamente en el chamanismo.

En conclusión: nos quedamos con el primer estudio. Habrá quien diga que para saber que las pulseras power-balance no funcionan no hacía falta un estudio tan cuidadoso. Ya lo sé!!: es sobradamente conocido que las únicas pulseras con efecto en el estado de ánimo (de una parte de la población), y que mejoran la función sexual (de ambas partes de la población) SON LAS PULSERAS DE DIAMANTES. Y esto es empirismo puro: prueba y verás. ;)