Hace no mucho hubo en la tele un anuncio de una marca de pizzas que venía a ser algo así.

En plano general, había público observando a un hombre bien vestido, hablando en una tarima, y decía:

«Según nuestro estudio, el martes es el peor día de la semana»

Y alguien del público interrumpía para decir

«¡Pero si los martes hay pizzas a 4,95!»

A lo que el ponente respondía:

«A la basura el estudio»

La multitud se pone en pie, aplaudiendo.

Cierre paso a la imagen promocional.

En su día ya lo comenté, pero creo que ese anuncio refleja a la perfección cómo funciona el pensamiento irracional socialmente aceptado, en contra del pensamiento crítico y las pruebas científicas.

Hoy querría un poco más cuidadosamente: #VaryExplica

Nos encontramos con una persona que ha realizado un estudio, que ha obtenido datos y los ha analizado minuciosamente, que ha obtenido resultados sólidos y los ha publicado. Los está presentando en algún tipo de congreso o de ponencia.

Vamos a tomar como licencia eso de que la conclusión sea que "el martes es el peor día de la semana". El caso es que, esta persona, a partir de datos generales y de análisis precisos, ha obtenido unos resultados que le han permitido obtener una conclusión.

Existen muchas formas de tratar de discutir esta conclusión. Pongamos algunos ejemplos.
* Analizar los resultados y verificar si la conclusión obtenida se deduce de ellos o no.
* Analizar la metodología a partir de la cual se han obtenido esos datos, y comprobar si es suficientemente sólida como para extraer conclusiones generales.
* Disponer de otros estudios que empleen el mismo tipo de datos, y verificar si las conclusiones son congruentes unos con otros, mediante técnicas de metaanálisis.
* Verificar si la toma de datos es o no rigurosa, y si los datos obtenidos son o no correctos. Datos incorrectos llevan a conclusiones no válidas.

* Comprobar si la estadística está adecuadamente realizada.

... etcétera.

Lo que no tiene sentido, en términos científicos, es soltar un dato anecdótico que lleve la contraria a todo el estudio, y emplearlo para tratar de desmontarlo por completo.

Pensemos un poco. Si en un estudio estamos analizando la calidad de algo (como la de "un día de la semana"), en ese análisis se estarán teniendo en cuenta múltiples variables; algunas incrementarán esa calidad, otras la reducirán.

Se dispondrá de un baremo que puntuará a las distintas variables de una forma previamente estudiada, para obtener así un resultado objetivo.

Con toda probabilidad, ese dato concreto y específico, perteneciente a una de las muchas variables estudiables, ya se haya tenido en cuenta en la metodología. Y aunque no haya sido así, aportar ese nuevo dato lo único que permite es incorporar una nueva variable que ampliará y mejorará el estudio, haciendo con ello más sólidas sus conclusiones.

Pero un solo dato anecdótico no es, en absoluto, suficiente para refutar una conclusión científica sólida. Para que un solo dato aislado pueda hacer tal cosa, necesita ser un dato global, cuya fuerza probatoria sea mayor que todas las variables tenidas en cuenta en el estudio. En cuyo caso, estaremos en uno de los casos mencionados: Verificar si los datos obtenidos son o no correctos. Datos incorrectos llevan a conclusiones no válidas.

https://paquita.masto.host/@VaryIngweion/109597031422712753

Vary, PhD, el del sombrero —🔻🐀 (@[email protected])

* Verificar si la toma de datos es o no rigurosa, y si los datos obtenidos son o no correctos. Datos incorrectos llevan a conclusiones no válidas.

Mastodon
​Muy al contrario de ese escenario, aportar una sola anécdota contra todo un análisis científico tiene el mismo sentido que decir que "a mi me ha funcionado la homeopatía", cuando todo el conocimiento científico riguroso muestra que no funciona, y que las posibles interpretaciones de eficacia se deben al efecto placebo.

En el anuncio, la frase "a la mierda el estudio" es demoledora. Es como decir "este dato anecdótico, sin fuente, sin evaluación y sin pruebas, es suficiente para derrumbar todo mi estudio". Y eso solo puede suceder en dos situaciones:

a) tu estudio es una mierda: ¿qué haces exponiéndolo en un congreso (o lo que sea eso)?

b) tu pensamiento mágico es superior a tu capacidad de análisis científico.

Que la multitud aplauda en pie es claro reflejo de algunos sectores de la sociedad.

Son los que aplauden al político de turno cuando niega el cambio climático porque está nevando en Florida.

Son los que aplauden a la periodista de turno que asegura que la homeopatía le funciona porque le ayudó a curar sus geranios.

Son los que aplauden a la escritora de turno que cree firmemente que "los niños tienen pene, las niñas tienen vulva, que no te engañen".

Son los que aplauden al líder religioso que niega la evolución porque así lo dice su libro mágico.

Son los que aplauden al agricultor que asegura curar la malaria con infusiones de Stevia.

Ojo. Que también puede ser que el que te esté contando los resultados de su estudio, te esté mintiendo. Por eso hay que tener el interruptor del pensamiento crítico encendido. Estar atento a cualesquiera luces rojas que puedan aparecer en el discurso, poner a prueba las afirmaciones y rechazar las que no tengan sustento.
Pero teniendo cuidado. "Lo que dice no cuadra con lo que yo creo" no es carencia de sustento; es discrepancia. Y si lo que dice tiene pruebas más sólidas y robustas que las que tienes tú en tu creencia, si eres honesto, cambiarás de creencia.

Este hilo ha sido subido, para su lectura más cómoda, en mi cuenta de ko-fi: https://ko-fi.com/post/A-la-basura-el-estudio-Z8Z5HEF15

Si te gustan mis hilos de divulgación y pensamiento crítico, puedes invitarme a un café. Estaré encantado.

A la basura el estudio

Vary Ingweion (Curiosa Biología) published a post on Ko-fi.com

Ko-fi
@VaryIngweion estas frases me hicieron evocar un ¿reportaje? con título clickbait similar a "Una operación que puede curar la diabetes", donde un médico dice que sus intervenciones quirúrgicas, hechas por endoscopia y con mínimas molestias, puede curar la DM2. Este señor vende reducciones de estómago. No sé por qué me da que no hay un análisis metódico detrás de sus afirmaciones, por más que quisiera creer en que es verdad lo que dice...
@VaryIngweion y, curiosamente, si haces en San Google una búsqueda sobre "cura dm2 cirugia" encontrarás argumentos a favor de ese dicho en multitud de empresas y colegios médicos... pero ocultan datos no poco importantes, como que el estudio se hizo en personas con obesidad mórbida, y que la verdadera causa de la disminución de indicadores compatibles con diabetes se refiere a la pérdida de peso, no a la cirugía. Si eso no es manipulación de datos con un fin económico encubierto...
@VaryIngweion en situaciones así cómo no vamos a entender el "a la mierda el estudio!" si vemos que la manipulación de datos es lo más utilizado en las estrategias de ventas de cualquier sector; y el encargar estudios que prueben tal o cual cosa es una herramienta más.
@VaryIngweion
En el anuncio, si no fuera un anuncio, la respuesta del ponente sería algo como: pues imagínate cómo sería sin esa oferta!! 🤣
@VaryIngweion a esto hay que agregar si las afirmaciones que se hacen se corresponden al objeto del estudio; el problema es que el grueso de la gente no dispone de herramientas para hacer una discriminación crítica de esto