Los 7 sesgos que arruinan una encuesta online

Una encuesta mal montada no da un resultado impreciso: da un resultado equivocado con aire de precisión, que es peor. Estos son los siete fallos que más veces convierten una votación en ruido, y qué se puede hacer con cada uno.

1. Autoselección

Qué es: responde quien quiere responder, y quien quiere responder no se parece al resto. Quien vota en una encuesta sobre gimnasios va al gimnasio.

Cuánto pesa: mucho. Pew Research midió que el error absoluto medio de estas muestras es aproximadamente el doble que el de las probabilísticas, y que el mejor método de ponderación disponible solo eliminó en torno al 30% del sesgo. El error es mayor precisamente entre jóvenes y minorías.

Qué hacer: no se elimina, se declara. Di a quién has preguntado («500 seguidores de una cuenta de moda») en vez de fingir que hablas de la población general. Y si la plataforma te da el desglose demográfico de quién votó, míralo antes de sacar conclusiones.

2. Efecto de arrastre

Qué es: ver el marcador antes de votar empuja hacia la opción que va ganando. En grupos pequeños es demoledor: los tres primeros votos fijan el resultado.

Qué hacer: ocultar los resultados hasta que la persona vote. Es la única defensa que funciona de verdad, y por eso en Votifo el resultado no se revela hasta que emites tu voto. En WhatsApp no es posible; en Instagram sí, porque los porcentajes solo aparecen tras votar.

3. Deseabilidad social

Qué es: la gente responde lo que queda bien, no lo que piensa. Se dispara cuando el voto es identificable.

Qué hacer: si la pregunta es sensible, el voto tiene que ser anónimo para el resto de participantes. Recuerda que en Instagram el autor ve el voto individual de cada seguidor, y que en WhatsApp lo ve todo el grupo. Elige la herramienta según lo comprometida que sea la pregunta.

4. Orden de las opciones

Qué es: la primera opción de una lista recibe más votos por el simple hecho de ir primera, sobre todo cuando quien vota no tiene una preferencia fuerte. Con listas largas también aparece el efecto contrario en la última posición.

Qué hacer: reducir a dos o tres opciones, y si comparas cosas equivalentes, alternar el orden entre encuestas. Con listas cortas el efecto casi desaparece.

5. Redacción de la pregunta

Qué es: la pregunta contiene la respuesta. «¿No crees que el precio es excesivo?» y «¿Cómo valoras el precio?» no miden lo mismo.

• Fuera adjetivos valorativos en el enunciado.
• Una sola idea por pregunta: «¿te gusta el diseño y el precio?» es dos preguntas disfrazadas de una.
• Opciones simétricas: si ofreces «me encanta / está bien / no me gusta», el punto medio no está en el medio.
• Nada de dobles negaciones.

6. Respondientes fraudulentos

Qué es: cuentas falsas, bots y gente que responde al azar para llegar al final. Pew estima entre un 4% y un 7% de respondientes fraudulentos en encuestas online de paneles opt-in, con una tendencia sistemática a marcar las opciones positivas.

Qué hacer: un voto por cuenta, cuentas verificadas, y desconfiar de los picos de votos que no se corresponden con picos de visitas.

7. Sesgo de supervivencia

Qué es: preguntas solo a quien sigue ahí. Si preguntas a tus clientes actuales qué les parece tu producto, los que se fueron —los que más te dirían— no están en la sala.

Qué hacer: tener presente a quién le falta la voz. Si tu encuesta va sobre por qué la gente abandona algo, el sitio donde preguntarla no es donde se queda la gente que no lo abandonó.

La lista de comprobación corta

1. ¿Se ocultan los resultados hasta votar?
2. ¿Puede el resto ver mi voto? ¿Debería?
3. ¿La pregunta sugiere una respuesta?
4. ¿Hay dos o tres opciones, no ocho?
5. ¿Sé a quién he preguntado, y lo digo al presentar el resultado?
6. ¿Hay votos suficientes para la diferencia que quiero afirmar? (Ver la tabla de margen de error.)