La verdad sobre los promedios de las encuestas y lo engañosos que son

El muestreo estadístico se utiliza a menudo para medir los daños e incluso demostrar la responsabilidad en algunos casos de la Ley de Reclamaciones Falsas. Las empresas farmacéuticas y de dispositivos médicos también lo utilizan para demostrar su eficacia. Es científico, funciona y podemos confiar en él en muchos esfuerzos.

¿Qué vamos a hacer con la abominación de este proceso que se nos impone cada cuatro años en la política presidencial a través de encuestas públicas?

Las empresas de marketing tienen derecho a captar publicidad. La forma más segura de obtener publicidad gratuita es publicar una encuesta dentro de los dos meses posteriores a las elecciones presidenciales. Poco importa si la encuesta es exacta, porque alguien la publicará.

Si no puedes vencerlos, únete a ellos. Por lo tanto, tengo la intención de intentar convencer a mi empresa para que lleve a cabo tal ejercicio. Nuestra encuesta, si puedo convencer a los poderes fácticos para que la hagan, sería tan válida como cualquier otra encuesta, tal vez más que muchas, pero dejaríamos claro que es solo para fines de entretenimiento, que nadie o nadie puede confiar en ella. poner en cualquier análisis “promedio”.

Tengo la intención de hacerlo para que se escuche el silbato que hoy hago sonar.

No, no se puede presentar un caso de Ley de Reclamaciones Falsas o incluso un caso de fraude de valores basado en esto, es sólo que este festival publicitario cuatrienal ha permitido que las matemáticas basura contaminen una disciplina legítima en la que todos confiamos en este negocio.

Las malas encuestas se incluyen en los promedios electorales y se blanquean como dinero sucio. La publicidad anima a los encuestadores a producir cifras, seguros de que ellos también obtendrán atención nacional si llaman a 600 personas o dicen que sí. El promedio de las encuestas da publicidad a quienes promedian las encuestas. No sabremos hasta dentro de 6 meses quién tenía razón, si alguien se molesta en mirar atrás.

Sin embargo, algunos en estas encuestas deben estar equivocados, incluso cuando los promedios se utilizan para que todos parezcan correctos. El promedio también crea un sesgo estadístico hacia una carrera reñida, que puede ser correcta o no, porque tiene que basarse en algunos datos falsos.

Mientras escribo esto hay dos encuestas recientes sobre Arizona. Uno patrocinado por una empresa de radiodifusión nacional y el otro por una empresa de Arizona. Una vez dice que Biden está arriba 52-42 en Arizona. El otro dice Biden 47-44. Ambos se llevaron a cabo durante aproximadamente el mismo período de tiempo. Ambos se “promediarán” en varios servicios.

Sin embargo, una de estas encuestas debe estar equivocada y ambas podrían estarlo. No es posible que exista este tipo de discrepancia y ambas encuestas sean un fiel reflejo del electorado en Arizona. Biden no puede tener simultáneamente 52 y 47 años. Esa es una diferencia demasiado grande como para eludirla incluso a través de las evasivas habituales que permitimos que estas personas se salgan con la suya, o si está permitido, ¿cuál es el punto? Nunca preguntamos a los encuestadores, si admite que su encuesta puede tener un error de 3 puntos y la elección podría decidirse por un punto, ¿de qué sirve su encuesta? (No sirve para nada excepto publicidad).

Promediar las encuestas a menudo oscurece lo que dice la encuesta individual. En estos números de Arizona, ambas encuestas dicen cosas completamente diferentes. Se dice que Biden tiene una gran ventaja. Sin un terremoto, Trump no puede ganar. Está perdiendo 10 puntos y Trump podría capturar a todos los indecisos y aun así perder. Obviamente, además, si Biden realmente está tan arriba en Arizona, hay que preguntarse sobre muchos otros estados. Por otro lado, tenemos una encuesta que dice que Biden tiene 47 y Trump dentro del rango con 44. Nadie está lo suficientemente cerca de 50 como para pensar que el liderazgo es seguro.

En lugar de promediarlos y obtener un Biden en 49 (más cerca de la encuesta que muestra a Biden muy arriba sin factores subyacentes sobre qué tan bien se realizó), ¿no quiere realmente saber en cuál de estos encuestadores creer? ¿No quieres que alguien te explique por qué podrían ser tan diferentes? Si la encuesta de 52 puntos es incorrecta, ¿por qué volver a utilizarla? Si los 47 puntos están fuera de lugar, ¿por qué incluir esa encuesta en cualquier análisis futuro?

Sólo un grupo de analistas (538) lo intenta al menos prohibiendo algunas encuestas y calificando a los encuestadores con una calificación de letras y proporcionando algunos antecedentes sobre los encuestadores que publica.

Todos los demás simplemente publican. Todos promedian las encuestas. Al hacerlo, las personas que los promedian parecen inteligentes. Llegan a actuar como si estuvieran analizando algo. Hablan de los números resultantes como si supieran algo nuevo. No lo hacen.

Mientras tanto, cuando se toma el promedio de los números en los estados en disputa, que por definición comienzan como carreras reñidas, invariablemente regresan a cerca de 50-50. La semana pasada hubo dos encuestas en Florida entre muchas. Los dos valores atípicos se realizaron durante el mismo período de tiempo. Uno tenía a Trump arriba 3 y con casi el 49%, muy cerca de ser sólido. El otro tenía a Biden por 5 con un 51%. Promedio que obtienes a Biden por 1, un número que nuevamente dice algo completamente diferente de lo que ya sea dijo la encuesta. Por supuesto, hubo muchas otras encuestas que mostraban una carrera reñida. El promedio dice que es un azar, incluidos los resultados basados ​​en dos encuestas que dicen que Florida no es necesariamente un azar.

Una vez más, sin embargo, una o ambas encuestas tienen que estar equivocadas, no pueden tener 8 puntos de diferencia y ambas estar en lo cierto. ¿Qué pasa si uno de estos tipos tiene razón y todos los demás están equivocados? ¿No tendría sentido tratar de ver quién está haciendo esto bien para saber a quién creer y seguir? Promediarlos elimina a cualquier revista de dicha responsabilidad, mientras que todos recibe publicidad. Si el tipo que le mostró a Trump una ventaja de 3 puntos la semana pasada tenía razón, básicamente todos los demás están equivocados y deberíamos abandonar el barco con casi todos los demás. Valdría la pena saberlo, en lugar de promediar ese resultado en la pila y confiar en algo completamente diferente para ser correcto. Puede que no le guste, pero es completamente posible, pero queda completamente oscurecido al utilizar tales promedios.

Sí, la mayoría de la gente le dice que Florida es un sorteo sin el beneficio de una sola llamada, según resultados anteriores. Si alguien gana Florida por 5 puntos, es una victoria aplastante. ¿Alguna encuesta dice que es un error, en parte porque es lo más seguro y aceptado para predecir? Se podría parecer bastante respetable publicando una encuesta de este tipo en Florida. No importa cómo obtuviste los números, alguien te creería si dices que está cerca.

Por ahora todo lo que puedes hacer es mirar los números y recordar, sólo porque sean números no significa que sean correctos. Esto no está a la altura de los estándares de trabajo estadístico que aceptaríamos en cualquier otra área. Existe un peligro real si este tipo de acaparamiento de publicidad socava la confianza en un trabajo estadístico legítimo preparado para un tribunal o en un laboratorio. Los estándares son importantes y promediar datos incorrectos no sirve para mucho más que entretenimiento y publicidad.