Metodología

¿Cuántas respuestas necesita tu encuesta para fiarte del resultado?

La tabla de margen de error por número de votos, por qué 385 respuestas es el número mágico, y cuándo un resultado de 60-40 no significa absolutamente nada.

Tu encuesta va 58% a 42% con 40 votos. ¿Ha ganado la primera opción? Probablemente no lo sepas. Con 40 votos, el margen de error ronda los ±15 puntos: el resultado real podría ser cualquier cosa entre 43-57 y 73-27. Es decir, podría estar perdiendo.

La tabla que resuelve el 90% de las dudas

Margen de error al 95% de confianza, en el caso más exigente (un reparto cercano al 50-50):

VotosMargen de errorQué puedes afirmar
30±18 puntosNada. Es una conversación, no un dato.
50±14 puntosSolo diferencias aplastantes (80-20 o más).
100±10 puntosDiferencias grandes: 65-35 sí, 55-45 no.
200±7 puntosUn 60-40 empieza a ser real.
385±5 puntosEl estándar de la industria. Un 55-45 se sostiene.
500±4,4 puntosMejora poco respecto a 385.
1.000±3,1 puntosNivel de encuesta publicable.
2.400±2 puntosA partir de aquí, cada punto ganado sale carísimo.
La regla de bolsillo

Si la diferencia entre las dos opciones es menor que el doble del margen de error, no hay ganador. Con 100 votos (±10), necesitas al menos 20 puntos de diferencia para hablar de ganador.

Por qué 385 y no 3.850

El margen de error no depende del tamaño de la población, sino de la raíz cuadrada del número de respuestas. Para preguntar a España (48 millones) y para preguntar a tu ciudad (200.000) hace falta prácticamente la misma muestra. Y como es una raíz cuadrada, cuadruplicar las respuestas solo reduce el error a la mitad: pasar de 385 a 1.540 votos te lleva de ±5 a ±2,5 puntos. Por eso las encuestas profesionales se paran alrededor de los 1.000: a partir de ahí pagas mucho por muy poco.

Lo que la tabla no arregla

El margen de error mide únicamente el azar del muestreo. Da por supuesto que quienes responden son una muestra aleatoria de la población. En una encuesta abierta en internet eso es falso: responde quien quiere. Ese sesgo no está en la tabla y no se corrige con más votos.

Pew Research Center lo ha medido: el error absoluto medio de las muestras opt-in es aproximadamente el doble que el de los paneles probabilísticos, y el mejor método de ponderación que evaluaron solo eliminó cerca del 30% del sesgo (de 8,4 a 6 puntos porcentuales). Diez mil votos autoseleccionados siguen siendo diez mil votos sesgados: lo que consigues es medir el sesgo con mucha precisión.

Lo desarrollamos en los siete sesgos que arruinan una encuesta online.

Entonces, ¿cuántos votos necesito yo?

Cómo conseguir más votos sin trampas

Preguntas frecuentes

¿Cuántas personas necesito para que una encuesta sea fiable?

Para un margen de error de ±5 puntos al 95% de confianza necesitas unas 385 respuestas, independientemente del tamaño de la población. Con 100 respuestas el margen es de ±10 puntos, y con 1.000 baja a ±3,1.

¿El margen de error depende del tamaño de la población?

Casi nada. Salvo que la muestra sea una fracción grande de la población total (más de un 5%), el margen depende solo del número de respuestas. Preguntar a un país o a un barrio requiere una muestra parecida.

¿Con muchos votos deja de importar el sesgo?

No. El número de respuestas reduce el error aleatorio, no el sesgo de selección. Si tu encuesta la responde sobre todo un tipo concreto de persona, más votos solo hacen que midas ese sesgo con más precisión.

Fuentes

  1. Pew Research Center — Comparing Accuracy of 2 Types of Online Survey Samples
  2. AAPOR — Sampling Methods for Political Polling
  3. The Decision Lab — Decision Fatigue

Haz tu propia encuesta en un minuto

Una foto en cada opción, resultados en directo y el desglose de quién ha votado. Gratis en iOS, Android y navegador.

Empezar en Votifo