En el anterior
artículo hablábamos ya de como no interesaba tener una población culta, y con conocimientos. Dichos conocimientos podrían suponer una herramienta de pensamiento crítico, que podría poner en jaque el establishment establecido.
Si bien habláblamos anteriormente de la educación, hoy hablaremos de los estudios.
Se ha puesto de moda, en los últimos años, presentar estadísticas, o anunciar productos como "
cientíticamente testados". Y presentar una estadística, o decir que se ha echo un estudio científico parece que de por sí da validez a lo que se dice, cuando ni mucho menos es así.
Esto se utiliza de una manera tan flagrantemente engañosa, porque la mayor parte de la gente es incapaz de diferenciar una estudio bien echo de otro mal echo. Simplemente no saben como. En el colegio ponen mucho énfasis en que sepas de memoria la tabla de multiplicar, o las ecuaciones de la ley de expansión de los gases. Te enseñan a formular perfectamente en química y en bioquímica. Pero si cogiésemos a un estudiante de secundaria o incluso a un universitario, serían totalmente incapaces de distinguir un estudio científico bien echo de otro que no lo está. Y si les presentas una estadística se la tragan sin más. Y esto es utilizado en nuestra contra, de manera contínua.
En
Per Ardua Ad Astra (blog médico), nos enseña como distinguir un estudio científico serio de una chapuza. Ya de principio debe tener algunos elementos (extraido del blog "Per Ardua Ad Astra"):
*
Tamaño muestral. Es crucial hacer un estudio con el mayor número posible de personas, así nos aseguramos de que nuestras conclusiones serán sólidas (una gaviota no hace verano, y esas cosas). Así pues, sabemos que la simvastatina sirve para bajar el colesterol y reducir la mortalidad gracias a un estudio con más de cuatro mil participantes. Y un ensayo con más de quince mil pacientes nos dijo que añadir el caro clopidogrel a la aspirina no aporta ninguna ventaja.
*
Grupo control. Es que si no hay grupo control, ¡no puedo calcular ninguna diferencia! Tengo que comparar mi fármaco con una sustancia biológicamente inactiva (placebo) o, mejor, con otro fármaco que ya haya demostrado su eficacia. Si no, no tengo forma de justificar que las variaciones que aparecen se deben a mi intervención: puede ser desde un efecto Hawthorne hasta una pura chiripa, pero en cualquier caso, mis resultados sirven para bastante poco.
*
Representatividad de la muestra, estudios multicéntricos. Quiero saber si mi medicamento será útil cuando se lo dé a pacientes con artrosis en general, no si se lo doy a mujeres menopáusicas de 55 a 65 años sin osteoporosis y que no hayan tomado antiinflamatorios en el último mes. Cuantas más condiciones ponga, más boletos tengo para que el estudio no sea extrapolable. Y un estudio que no es aplicable a la práctica clínica, es una perfecta pérdida de tiempo y dinero.
Obviamente, esto también tiene un contrapartida: ¿y si resulta que el medicamento sólo es útil en mujeres? Para eso está el análisis multivariante; cuando procesemos los resultados veremos que estos varían en función del sexo (o de la edad, o…) y dejaremos una sugerencia a otros investigadores: ¡eh, centraos en este subgrupo!
*
Aleatorización. Si asigno al azar quién recibe el fármaco y quién el placebo, al final tendré dos grupos iguales entre sí. Pero si en el hospital A damos el fármaco y en el B dan el placebo, ¿las diferencias se deben al medicamento, a que el A tiene pacientes más enfermos, o a que en el B se les añaden otros tratamientos?
*
Solidez de las variables de resultado. Todos sabemos que tener alto el azúcar es malo. Pero también sabemos que morirse es aún peor. Por consiguiente, a mí me da igual que un medicamento baje la glucosa: ¡lo que quiero es no morirme por la diabetes! No vaya a ser que el medicamento me baje el azúcar… pero me cause un infarto.
*
Enmascaramiento: simple, doble o triple ciego. Del mismo modo que a los catadores no se les dice qué están probando, en un ensayo no se debe decir si te estoy dando el antiguo y poco eficaz tratamiento, o la chachipastilla que te va a poner bueno en tres días. Entre otras cosas, porque quizás la pastilla no sea tan chachi… pero tú te lo creas y le digas al médico que, huy, ya estás mucho mejor de los temblores. Así que podemos “cegar” al paciente (simple ciego), al paciente y al médico que lo evalúa (doble), o al paciente, al médico, y al matemático que procesa los datos (triple ciego). Así nadie puede tener la tentación de inclinar los resultados.
*
Significación estadística. Significación clínica. Que algo sea “estadísticamente significativo” significa que, si realmente no hubiese diferencias entre las opciones ensayadas, sería la hostia de raro encontrar las diferencias de mi estudio, u otras aún mayores. Digamos que la significación estadística (que se otorga a partir del 5%, un valor elegido por convenio) es como un sello que avala mis resultados: señores, aquí hay una diferencia, y casi seguro que no es por casualidad.
Pero precaución: significación estadística no implica relevancia clínica. Puede que un antibiótico cure la infección en 8,3 días y otro lo haga en 8,2. A eso le puedes poner las cintas que quieras, pero ya me dirás si vale la pena dar un medicamento nuevo y más caro a cambio de 0,1 días de ingreso menos.
En el caso de las estadísticas, la cosa quizá se complica una cosa más. Ha sido habitual, en los últimos años, ver ciertas estadísticas de las empresas de gestión de derechos de autor (Lease $GAE, por ejemplo), diciendo lindezas del tipo:
"Y es que estiman que, solo por el efecto de la descargas no autorizadas de libros digitales, han dejado de ingresar más de 400 millones de euros de enero a junio de este año". (Fuente artículo en el periódico
El País)
Pero ¿de donde se sacan esta cifra? Primeramente, harémos el cálculo: de enero a junio van 180 días. Lo cual supone una pérdida de 2.222.222,22 € diários. Pongamos un precio médio de 10€ por libro (los habrá de 20€, y los habrá de 5€), y nos salen 222.222,22 libros diários de media. Ya la primera en la frente. La cifra parece un poco inflada. Pero si la ponen será por algo. Ricardo Galli, en un magistral pos en su
blog dijo al respecto:
"¿Citan algún estudio que de soporte al titular? No, ninguno. Hay sólo tres enlaces autereferentes, en ninguno se enlaza a ningún estudio mínimamente relacionado con el titular (al final, en la caja, mencionan uno de 2009, pero no había iTablet".
Y esta es una costumbre que se suele perder cuando lo que intentan es colarnosla.
Nos debería crujir, y mucho, que no se mencione en ninguna parte el estúdio que ha dado lugar a las afirmaciones. Y por supuesto hay que consultar el estúdio para saber si la metodología aplicada ha sido la correcta.Los fallos metodológicos son más habituales de lo que creemos. De echo, casi todos los estudios realizados sobre la Homeopatía comenten estos fallos. En el apartado de pruebas científicas de la página
¿Que es la homeopatía? nos comentan a este respecto:
"Uso de homeopatía para tratar efectos adversos de tratamientos contra el cáncer (versión original). De los ocho estudios analizados, cuatro no proporcionan resultados positivos, dos son de metodología muy dudosa y solamente dos parecen arrojar algún resultado favorable a la homeopatía. Conclusión de los revisores: hay que replicar estos estudios."
A todo esto, hemos de incluir toda clase de falacias utilizadas para demostrar las cosas sin tan siquiera usar pruebas. Algunas de las más importantes serían (
extraido de wikipedia):
-
Cum hoc, ergo propter hoc: o la correlación o relación entre dos implica que uno es causa y otro efecto, que afirma que dos eventos que ocurren a la vez tienen necesariamente una relación causa-efecto. Se expresa de la siguiente manera: si ocurre A y correlacionadamente después ocurre B entonces A ha causado a B. Esta falacia hace una conclusión prematura de la causalidad incluso sin evidencias que la soporten. Esto es una falacia lógica porque aunque probable existen al menos otras cuatro posibilidades; 1. que B sea la causa de A; 2. que haya un tercer factor desconocido que sea realmente la causa de la relación entre A y B; 3. que la relación sea tan compleja y numerosa que los hechos sean simples coincidencias y 4. que B sea la causa de A y al mismo tiempo A sea la de B, es decir, que estén de acuerdo, que sea una relación sinérgica o simbiótica donde la unión cataliza los efectos que se observan.
-
Falacia de la causa simple o efecto conjuntivo o relación espuria: Esta falacia lógica de causalidad ocurre cuando se asume que existe solo una simple causa para un resultado cuando en realidad puede haber un conjunto específico o suficiente de causas que lo hayan provocado. En esta falacia lógica dos sucesos sin conexión lógica, se relacionan causal e incorrectamente debido a un tercer suceso o factor desconocido denominado factor desorientador o variable escondida que los provoca. La relación espuria da impresión de fortaleza y ligazón fuerte entre dos sucesos que es inválida cuando es examinada objetivamente. Véase la navaja de Occam que en su aplicación puede crear una relación espuria debido al desconocimiento de un factor más sencillo. Esta sobresimplificación es un caso específico de falso dilema donde otras posibilidades son ignoradas.
-
Circularidad entre causa y consecuencia: Es una falacia lógica donde la consecuencia de un determinado fenómeno es llamada a ser también la causa principal. Esto es conocido como la falacia del huevo o la gallina que hace referencia al dilema de causalidad que surge de la expresión «¿qué fue primero, la gallina o el huevo?». Puesto que el huevo y la gallina se crean recíprocamente en ciertas circunstancias la respuesta es ambigua.
- Petición de principio o petitio principii o fe de origen: Es una falacia que ocurre cuando la proposición a ser probada se incluye implícita o explícitamente entre las premisas de las que parte el razonamiento.
-
Falacia de las muchas preguntas o pregunta compleja con la cual, el mero hecho de responder la pregunta implica presuponer en la respuesta algo que no se quiere asumir como cierto. La finalidad de dicha falacia es que el adversario dialéctico asuma en su contestación alguna información que no se quiere conceder bien por falsa o bien porque dicha concesión perjudica gravemente la argumentación que pretende sostener. Para sortear dicha falacia lo idóneo sería no contestar, para no dar información extra que no se desea conceder al interlocutor.
-
Post hoc, ergo propter hoc o post hoc o correlación coincidente o causa falsa o non sequitur (‘no le sigue’ en latín): Es una expresión latina que significa «después de esto, luego a consecuencia de esto» es un tipo de falacia que asume que si un acontecimiento sucede después de otro, el segundo es consecuencia del primero. Es verdad que una causa se produce antes de un efecto pero la falacia viene de sacar una conclusión basándose sólo en el orden de los acontecimientos. Es decir, no siempre es verdad que el primer acontecimiento produjo el segundo acontecimiento. Esta línea de razonamiento es la base para muchas creencias supersticiosas y de pensamiento mágico. Véase teoría del dominó o también cum hoc, ergo propter hoc que no hace hincapié en el orden aunque sí en la correlación de dos sucesos.
-
Non sequitur: Las razones dadas para soportar una afirmación son irrelevantes o no relacionadas.
-
Falacia de la regresión o del retroceso: Es una falacia lógica en la que se asume una causa donde no existe. Este tipo de falacia es un caso especial de la falacia Post hoc, ergo propter hoc. Esta falacia se denomina de retroceso porque se produce cuando se asocia una causa simple a la desaparición o retroceso de un factor. Conduce a las supersticiones y al pensamiento mágico.
-
Falacia del francotirador: Es una falacia lógica donde la información que no tiene relación alguna es interpretada, manipulada o maquillada hasta que ésta aparezca tener un sentido. El nombre viene de un tirador que disparó aleatoriamente varios tiros a un granero y después pintó una diana centrada en cada uno de los tiros para autoproclamarse francotirador. Tiene que ver con el sesgo cognitivo Ilusión de serie donde las personas tienden a ver patrones donde solo hay números aleatorios. Esta falacia no se aplica cuando uno tiene una predicción o una hipótesis particular antes de observar los datos. Uno podría tener una teoría de cómo debería comportarse algo o el patrón que debe seguir algo y comprobar mediante pruebas empíricas o datos que de hecho es así (método científico). Alternativamente, se pueden tomar los datos observados para construir una hipótesis tal como hace el francotirador pero luego es necesario ensayar la hipótesis con nuevos datos. Véase test de hipótesis. Uno no puede usar la misma información para construir y después ensayar o testar la hipótesis ya que incurriría en la falacia del francotirador.
-
Falacia de dirección incorrecta: Es una falacia lógica de causa en la que la causa y el efecto están intercambiados. La causa pasa a ser el efecto y viceversa. Es un tipo especial de la falacia cum hoc, ergo propter hoc o también de falso dilema.
-
Argumentum ad consequentiam o argumento dirigido a las consecuencias: Es un argumento que concluye que una premisa (típicamente una creencia) es verdadera o falsa basándose en si esta conduce a una consecuencia deseable o indeseable. Es una falacia porque basar la veracidad de una afirmación en las consecuencias no hace a la premisa más real o verdadera. Asimismo, categorizar las consecuencias como deseables o indeseables es intrínsecamente una acción subjetiva al punto de vista del observador y no a la verdad de los hechos
-
Argumentum ad baculum o argumento dirigido al bastón o al mando o argumento por la fuerza: Es un argumento donde la fuerza, coacción o amenaza de fuerza es dada como justificación para una conclusión. Es un caso especial negativo del argumentum ad consequentiam. Este tipo de falacia se da en los casos en los que se duda en intervenir o no, en un conflicto. Se basa la decisión en algunos, en la consecuencia de actuar o no actuar, lo que justifica la intervención. Sin embargo, aunque estas decisiones preventivas previas, modifican forzosamente las predichas y subjetivas consecuencias, no aclaran la necesidad de actuar o no aseguran la verdad de las premisas en las mismas. El miedo a las consecuencias no puede ser el motor de ninguna decisión ni es capaz por sí mismo de hacer más veraz una posibilidad.
-
Falacia del punto medio o falacia del compromiso o falacia de la moderación: se genera al asumir que la conclusión más valida o certera es la que se encuentra siempre como compromiso entre dos puntos de vista extremos. La falacia se produce porque la verdad o certeza de idoneidad se basa no en los argumentos sino en premisas subjetivas (se subjetiviza la verdad o mentira de un hecho) de qué es lo que se ha considerado como extremo y qué se considere como punto medio y que se considere que éste es siempre cierto. Es posible que lo considerado como extremo es en realidad el hecho cierto. Esta falacia viene del hecho de que con frecuencia una posición intermedia o moderada suele ser correcta.
-
Recurso de probabilidad o apelar a la probabilidad: Es una falacia lógica que asume que porque algo es posible o probable, es inevitable que pase. Esta falacia es usada para provocar y promover la paranoia.
-
Conclusión irrelevante o ignoratio elenchi o refutación ignorante o eludir la cuestión: Es la falacia lógica de presentar un argumento que puede ser por sí mismo válido, pero que prueba o soporta una proposición diferente a que la que debería apoyar. Aristóteles creía que todas las falacias lógicas podían ser reducidas a ignoratio elenchi. También en algunos casos estas conclusiones irrelevantes son intentos deliberados por parte de manipuladores, expertos en falacias lógicas, de cambiar el asunto de la conversación.
-
Argumentum ad hominem o argumento dirigido al hombre: Consiste en replicar al argumento atacando o dirigiéndose a la persona que realiza el argumento más que a la sustancia del argumento. Tu quoque en el que se desvelan trapos sucios suele ser un mecanismo.
-
Falacia del hombre de paja o argumentum ad logicam: Es una falacia lógica basada en la confusión de la posición del oponente. Generar un «hombre de paja» es crear una posición fácil de refutar y luego atribuir esa posición al oponente para destrozarlo. En realidad el argumento real del oponente no es refutado sino el argumento ficticio que se ha creado. El nombre viene de los hombres de paja que se usan para entrenar en el combate y que son fáciles de abatir. Es decir, se atacan los flecos o posibles malinterpretaciones que se puedan hacer de la premisa.
-
Argumentum ad silentio o argumento dirigido al silencio: Consiste en considerar que el silencio de un ponente o interlocutor sobre un asunto X prueba o sugiere que el ponente es un ignorante sobre X o tiene un motivo para mantenerse en silencio respecto a X. En relación con esta falacia, es necesario hacer referencia a la doctrina jurídico-procesal llamada «de los actos propios», por la cual, en una de sus aplicaciones más frecuentes, si una de las partes en un proceso no alega cierto hecho, dato, prueba o argumento disponiendo de trámite para hacerlo, se presumirá que carece del mismo. Por tanto, aunque lógicamente el argumentum a silentio o ex silentio es una falacia, porque el silencio de un interlocutor no puede tomarse como prueba de certidumbre de lo dicho por un interlocutor contrario, en el terreno de la pura retórica puede ser un indicio de falta de argumentos o de falta de capacidad para contrarrestar dialécticamente los argumentos expuestos por la adversa. Esta presunción se realiza en el terreno jurídico por ser este un terreno subjetivo marcado por leyes que están hechas para que la mayoría pueda quedar satisfecha. Y esto es así porque la mayoría posee el prejuicio de que el silencio de un interlocutor implica la falta de argumentos o un motivo particular para tenerlo y también porque el que rompe el estado de normalidad tiene la obligación de probar con argumentos las acusaciones.
ConclusiónAl final, el gran problema es que la mayor parte de las personas no tienen las herramientas necesarias para hacer frente al fraude o a la charlatanería. No saben distinguir un estúdio científico serio y bien echo de una chapuza "ad-hoc" para demostrar un interés concreto. Y eso nos hace manipulables. El propio estado es el primero que no sienta precedente, obligando a nuestros estudiantes a conocer todos estos métodos de confirmación de las pruebas dadas, pudiendo así presentar cualquier cosa con el beneplácito de todos.
Esta falta de herramientas para detectar la charlatanería o, incluso, la pura estafa, lleva a éxito comercial de pulseritas mágicas, colchones y almohadas con imanes, o a que la gente piense que tomando una disolución 30CH de arsénico se cura el asma. Simplemente la mayor parte de la población está expuesta a esto. Y mientras nuestros dirigentes miran para otro lado.
¿Deberíamos actuar por nosotros mismos?
Entradas
