Aprende

¿Cuántas respuestas de IA necesitas para medir la visibilidad? Las matemáticas del margen de error

Hazle la misma pregunta dos veces a un asistente de IA y puedes recibir dos respuestas distintas. Eso hace que todo puntaje de visibilidad en IA sea una estimación — y la mayoría se construye con muchas menos respuestas de las necesarias para sostener las conclusiones que se sacan de ellos.

Una curva de campana con una banda sombreada alrededor de su centro
Medición

Hallazgos clave

Por qué una respuesta no es una medición

Los modelos de lenguaje grandes muestrean su salida. La misma pregunta, hecha de la misma manera, puede nombrar tu marca en una respuesta y dejarla fuera en la siguiente. Así que “¿ChatGPT nos recomienda?” no tiene una respuesta de sí o no; tiene una tasa. Estimas esa tasa preguntando muchas veces y contando — y como toda estimación a partir de una muestra, viene con un margen de error.

Qué tan amplio es el rango con cada tamaño de muestra

Cada fila muestra una marca observada en la mitad de sus respuestas muestreadas, y el intervalo de confianza del 95% de su visibilidad real (intervalo de puntuación de Wilson, que se comporta bien con muestras pequeñas). La última columna es el margen ± de los libros de texto al 50%, como comparación.

Respuestas muestreadasObservadoRango del 95% de la visibilidad realMargen simple
52 de 5 (40%)12%–77%±44 pts
105 de 10 (50%)24%–76%±31 pts
157 de 15 (47%)25%–70%±25 pts
2512 de 25 (48%)30%–67%±20 pts
5025 de 50 (50%)37%–63%±14 pts
10050 de 100 (50%)40%–60%±10 pts
200100 de 200 (50%)43%–57%±7 pts
400200 de 400 (50%)45%–55%±5 pts

Lo que cinco respuestas pueden y no pueden decirte

Cinco respuestas es un tamaño común para una revisión rápida — incluida nuestra propia revisión gratis. Si la visibilidad real de una marca es exactamente 50%, estas son las probabilidades de cada puntaje:

Puntaje0/51/52/53/54/55/5
Probabilidad3.1%15.6%31.2%31.2%15.6%3.1%

Una revisión de cinco respuestas sirve para una cosa: decirte si apareces siquiera. Si sacas 0/5, tu visibilidad real probablemente es baja (el límite superior del 95% es 43%). No sirve para distinguir 40% de 60%, ni esta semana de la pasada.

Detectar cambios a lo largo del tiempo

Comparar dos periodos es más difícil que medir uno, porque las dos lecturas tienen ruido. La tabla da el cambio más pequeño que podrías detectar de forma fiable (80% de potencia, 5% de significancia, alrededor de 50% de visibilidad) con el mismo número de respuestas en cada periodo.

Respuestas por periodoCambio mínimo detectable
589 pts
1551 pts
2540 pts
5028 pts
10020 pts
20014 pts
40010 pts

Así que un dashboard que reporta “+8 puntos esta semana” con 25 respuestas a la semana reporta sobre todo ruido. Las líneas de tendencia de muchas semanas, o agrupadas entre muchas preguntas, son mucho más fiables que cualquier variación de una semana a otra.

Las respuestas no son del todo independientes

Las matemáticas de arriba suponen que cada respuesta es un sorteo independiente. No lo son del todo: las respuestas repetidas a la misma pregunta están correlacionadas, así que 5 preguntas hechas 3 veces cada una aportan menos información que 15 preguntas distintas. Reparte tu muestra entre muchas preguntas de compradores distintas en vez de repetir unas pocas, y toma los rangos de arriba como el mejor caso.

Reglas prácticas

Nuestras palabras clave rastreadas hacen cada una de cinco preguntas congeladas tres veces por ejecución justo por esta razón, y nuestra metodología muestra la muestra detrás de cada cifra. Para las fórmulas de las métricas en sí, mira cómo calcular el share of voice en IA.

Cita esto

Puedes citar y graficar estas cifras con un enlace de vuelta. Cita sugerida: Mentioned, “¿Cuántas respuestas de IA necesitas para medir la visibilidad? Las matemáticas del margen de error”, 25 de octubre de 2026, https://mentioned.at/learn/ai-visibility-margin-of-error. Los datos y el texto se publican bajo CC BY 4.0.

Haz una comprobación gratis