04 febrero 2013

Todo es probabilístico


Me tomó un montón de años convencerme que no vivo en un mundo mecánico y determinista, donde el que hace las cosas bien tiene éxito, y el que se equivoca fracasa, donde el bueno es premiado y el malo castigado, sino más bien en un mundo fecuentista, donde unas cosas ocurren con mayor frecuencia que otras, las cosas frecuentes dan cierta sensación de seguridad y las infrecuentes dan grandes premios o grandes fracasos.

Todos tenemos un instinto a buscar la seguridad y evitar el riesgo, algunos tienen ese instinto tan desarrollado que dedican toda su vida a evitar los riesgos tanto en las cosas en que tienen más control (como los asuntos económicos por ejemplo) como en cosas sobre las que casi no tienen ningún control como en la salud o las relaciones sociales. Todos tenemos -de manera inconsciente- una especie de parrilla de riesgo: somos muy arriesgados en algunas cosas y menos en otras.

Es muy curiosa la percepción de estabilidad que tenemos, seguramente es una característica necesaria igual que la aversión al riesgo por razones de supervivencia, pero si nos pudiésemos dar cuenta de la multitud de peligros que enfrentamos a cada rato viviríamos muertos de miedo. Bueno, algunos que son más sensibles a eso viven así, asustados de todo.

Esto a propósito de el libro Naked Statistics de Charles Wheelan, que estuve tratando de encontrar pirateado. Todavía no lo encuentro porque se trata de un libro muy nuevo. He visto varias conferencias interesantes de Wheelan y he leído buenas reseñas sobre el libro, que se trata de los fundamentos matemáticos de la estadística y como se relacionan con nuestra intuición y sentido común. Especialmente el libro trata sobre el uso o la interpretación de las estadísticas y lo ngañosa que suele ser esta.

Los mejores ejemplos que he leído en las reseñas, son acerca de la medicina. Dice el autor que la salud no tiene nada en común con las leyes de la física y mucho en común con los boletos de lotería, el valor de las acciones o el pronóstico del tiempo. El doctor al hacer un diagnóstico apuesta basado en frecuencias y en ningún caso hace inferencias exactas acerca de causas y efectos mecánicamente determinados.

Por ejemplo para los fanáticos de los rankings, cuando les dicen que tienen cáncer buscan a los doctores con mayores tasas de operación exitosa. Lo más probable que esa posición en los ranking se deba a que evitan cuidadosamente operar a los casos más difíciles, un ejemplo clásico de manipular estadísticas introduciendo un bias en la muestra.

También hace notar que las noticias sobre el descubrimiento de una droga que sirve para algo capta mucha más publicidad y permanece mucho más tiempo en los medios que cuando descubren que una droga no sirve para lo que se suponía. Por eso cada año somos bombardeados con anuncios sobre drogas, dietas y tratamientos milagrosos y casi ningún estudio que diga que tal o cual cosa no sirve como se creía.

No es culpa de las estadísticas, sino de una interpretación equivocada por conocimiento superficial de conceptos básicos. Yo una vez discutía la validez de una encuesta con una muestra ridículamente pequeña y sesgada y mi interlocutora, doctora en biología, me dijo "en experimentos biológicos con una muestra de tres o cuatro nos basta". Tomé nota mental para saber a que atenerme la próxima vez que lea sobre una investigación biológica.

Y ya que estamos en eso, hay un maravilloso artículo del biólogo Stephen Jay Gould, donde cuenta de su reacción cuando le encontraron un cáncer que tenía mortalidad media a los ocho meses después del descubrimiento, es decír el típico caso cuando el doctor dice "tómese  las medidas para el ataud y prepare el testamento, porque le quedan solo ocho meses en este mundo". El artículo se llama The median Isn´t the Message y lo pueden leer en inglés en el link y muestra como una comprensión correcta de la estadística puede incluso salvarnos la vida. A todo esto Gould se murió más de 20 años después, por causas que no tuvieron nada que ver con ese cáncer.

El uso de la inferencia estadística y la prueba de hipótesis no tiene nada malo, tal como no tiene nada malo el Teorema de Pitágoras o el método de los mínimos cuadrados. Lo malo es cuando alguien por ignorancia los usa para "probar" cosas que no pueden ser probadas en absoluto. Entonces la "prueba estadística" se transforma en un engaño. Mucha gente incluidos prestigiosos científicos y ganadores de Nobel, el propio Keynes en su Teoría General abusó de las estadísticas y fue corregido por economistas posteriores. Y eso que su profesión de origen eran las matemáticas, nadie está libre de la tentación de usar la "prueba estadística" a favor de sus opiniones.

Hay otra historia entretenida sobre las estadísticas como prueba en un caso judicial. Buscando el libro de marras em encontré con el artículo "Naked Statistic evidence of liability: is subjective probability enough?" que parte relatando el rechazo de una demanda de paternidad cuando el examen de ADN dio resultado positivo con un 99.8% de probabilidad. ¿Se han fijado como las pruebas de ADN se tienden a considerar como prueba concluyente en un juicio pese a que no son 100% exactas?.Bueno, algunos jueces no las consideran tan concluyentes.

Hay un conflicto cuando en un juicio se condena a alguien por la probabilidad de que haya cometido un delito y se relata un caso ficticio, muy estudiado por los teóricos del ssitema judicial. Digamos que una cierta compañía de buses "Blue Company" maneja el 80% de negocio de transporte dentro de cierta área, una señora está paseando a su perrito y un bus lo atropella y lo mata. La señora es daltónica y no puede asegurar de que color era el bus. Entonces se discute si la compañía es responsable o no por la "alta probabilidad" que haya sido uno de sus buses el del atropello.

Aquí hay varios problemas interesantes, el primero es el umbral de probabilidades, porque la apreciación podría ser distinta si la compañía controla solo el 60% o el 90% del total de los buses ¿como definir un "umbral de probabilidad" que se pueda usar como criterio para definir culpabilidad? Como verán el caso en teoría no es muy distinto al de aceptar una prueba de ADN, solo cambia el umbral. ¿Se puede condenar a alguien por probabilidades? ¿que tal si es una pena de muerte? Han ejecutado a gente por mucho menos.

La verdad es que todo es probabilístico, nuestra naturaleza humana no nos da acceso a conocimiento completo acerca de nada y lo malo es que las probabilidades no son un asunto muy intuitivo, el sentido común muchas veces se engaña con eso. Ah, cuidado con las estadísticas, y con los payasos que dicen "está estadísticamente demostrado" y creen que cerraron la discusión.

5 comentarios:

  1. Hace 15 anos cuando vivia en California cerca de la frontiera con Nevada jugaba los juegos de azar en los casinos de Reno. El juego de Black Jack es ganable segun los calculos puesto que tus probabilidades cambian cada vez por que se quitan las cartas de la baraja. En algunos circumstancias las probablilidades te favorecen. Lo demas de los juegos las probabilidades siempre favorecen el casino. Pero... acuerdo algunos casos donde los jugadores podian vencer la casa en ruleta. Es que cada ruleta es una maquina mechanica. Cada una tiene sus rasgos distinctos; inclinacion, imperfecciones de eje, rodamientos desgastatos etc. En la epoca 90 algunos jugadores lo aprendieron y recabaron los resultados estadisticos. Despues de analizarlos concluyeron que si se puede ganar la ruleta tambien por que a pesar de las reglas matematecas, las ruletas no las siguen dado sus imperfecciones. Hay un par de los casos bien conocidos donde los jugadores "enganaron" la casa.

    Entonces todo tiene sus imperfecciones y puede desviarse del rumbo esperado.

    ResponderBorrar
  2. Y si la simple probabilidad es difícil de entender, la probabilidad de eventos compuestos ni le digo.
    El tipo sale de la casa y lo espera un lanzador de cuchillo que acierta el 40% de los lanzamientos, un francotirador que da en el 40% de sus blancos y un tira bombas que mata en el 20 % de sus tiros.
    Se diría que el tipo está estadísticamente condenado.
    Pero se olvida que cada uno de los asesinos no tendrá oportunidad de matarlo si lo mata otro antes.
    Si tiene un 60% de salvarse del cuchillero, entonces el francotirador que lo espera ese día sólo tendrá un 0.4 x 0.6 = 24 % de probabilidades de matarlo.
    Y el bombista sólo un 0.2 x 0,6 x 0,6 = 7.2 % de opciones de liquidarlo.
    El tipo puede irse a trabajar casi tranquilo.

    ResponderBorrar
  3. Kirill es cierto,la ruleta tiene sus imperfecciones y ni siquiera con computadores se pueden generar numeros completamente al azar (son "seudo-aleatorios" nomás y en algún momento son predecibles). También hay gente con cierta habilidad para "presentir" los números, hay personas que han ganado la lotería no una sino varias veces seguidas.

    El azar tampoco es "puro" por eso en cálculos de ingeniería (para el balance de cargas en distribución eléctrica por ejemplo) se usan cálculos con el "método de Montecarlo" que justamente mezcla el azar con factores deterministas.

    Se puede quebrar el casino, un tipo quebró Montecarlo un par de veces pero... no es un evento frecuente. Por eso dicen que "nadie tiene clavada la rueda de la fortuna", eso no significa que nadie gana, sino que son poquitos y no siempre.

    Ulschmidt ¡diablos! debo conseguirme más enemigos entonces: con uno que me tire cuchillos, otro que dispare y un tercero que trate de colocarme bombas ya puedo andar seguro por la calle.

    Así es, las probabilidades compuestas enredan todavía más la cosa y lo peor es que casi todas las probabilidades son compuestas, hasta las de la ruleta por las imperfecciones mecánicas que mencionaba Kirill ¡Hasta el azar perfecto es difícil de conseguir!

    ResponderBorrar
  4. Malandra en el teclado06 febrero, 2013 12:05

    Tommy Boy:

    A lo que se refiere Kirill, más que a tincadas, corresponde a un grupo de gente que se vale de herramientas para vencer al casino:

    http://physics.ucsc.edu/people/eudaemons/eudaemons.html
    http://www.microsiervos.com/archivo/azar/ruleta-laser-ordenador.html
    http://www.microsiervos.com/archivo/azar/la-fabulosa-historia-de-los-pelayos.html

    ResponderBorrar
  5. CLaro! no solo los Pelayos han quebrado casinos sino varios otros. Lo que pasa es que los "sistemas" son tan difícilmente replicables que hasta el día de hoy no han sido capaces de eliminar a las ruletas en las salas de juego del mundo.

    El día que aparezca un sistema que cualquiera pueda usar y que de una probabilidad de ganar CONSISTENTE, aunque sea pequeñisima, sobre el 50% (y sabemos que la ruleta y otros juegos la probabilidad del público es mucho menor), entonces desaparecerán las ruletas de los casinos.

    Hay juegos como el Black Jack que tal como dice Kirll se puede tomar ventaja simplemente contando las cartas que han salido y calculando las probabilidades, es decir -se puede aumentar la probabilidad de ganar, pero eso no da una probabilidad consistentente-

    El casino en cambio si tiene una probabilidad consistente por diseño: para efectos prácticos tiene fondos casi infinitos y puede limitar las reglas para bajar las probabilidades de los jugadores (por ejemplo prohibiéndoles las máquinas para contar cartas, colocando el doble cero en la ruleta, etc.)

    Creo que con esto pasa algo parecido a la criptografía: no es posible generar en una máquina una serie de números perfectamente aleatoria, pero PARA EFECTOS PRACTICOS se puede hacer una serie sumamente ifícil de predecir, no tiene para que ser perfecta.

    LAs ruletas y otros juegos delcasino tampoco necesitan ser perfectos, basta con que el casino ponga unas pocas dificultades para que en la práctica nadie pueda ganar de manera consistente.

    Pero aquí hay un imponderable: hay personas que al parecer pueden anticipar resultados con mayor frecuencia que lo normal, por videntes, intuición o cualquier otro mecanismo que hasta ahora no se explica. Son muy pocos pero el fenómenos existe y es conocido desde siempre y contra esas "tincadas" que muchas veces se disfrazan de sistemas, el casino no puede hacer nada, aparte de prohibirles la entrada.

    ResponderBorrar

"Send me a postcard, drop me a line
Stating point of view
Indicate precisely what you mean to say
Yours sincerely, wasting away
Give me your answer, fill in a form
Mine for evermore
Will you still need me, will you still feed me
When I'm sixty-four"