04 · CRO

¿Tu sitio puede hacer A/B testing?

Un sitio con 100 conversiones al mes necesita cerca de cuatro meses para detectar una mejora del 30%, y más de ocho para una del 20%. Los dos números se pasan del máximo de 6 a 8 semanas que aguanta un test antes de que la estacionalidad y la pérdida de cookies ensucien el resultado. Ese sitio no puede hacer A/B testing — puede hacer otras cosas, varias más rentables, pero no testing.

Sin registro · sin correo · se calcula en tu navegador

Tus números

Los saco de GA4: usuarios y conversiones de los últimos 30 días.

No es testeable

Con este tráfico, el test tardaría 23 semanas

Eso son 5.3 meses corriendo un solo test. Para cuando termine, la respuesta ya no aplica al negocio que tenías cuando lo lanzaste. No es un problema de herramienta ni de agencia: no hay volumen.
Visitas por variante
53,208
Conversiones por variante
1,596
Duración
23.1 sem
Duración contra el techo de 8 semanas23.1 sem
08 semanas12+

Qué sí puedes detectar con este tráfico

La fila marcada es la mejora más pequeña que cabe en 8 semanas.

MejoraVisitas/varianteDuraciónVeredicto
+5%207,93590.3 semno
+10%53,20823.1 semno
+15%24,19010.5 semal límite
+20%13,9116.0 sementra
+30%6,4522.8 sementra
+50%3,3342.0 sementra
+75%3,3342.0 sementra

Con este volumen, esto es lo que sí funciona

  1. Auditoría de fricción. Heatmaps y grabaciones — mínimo 100 sesiones antes de concluir nada. Encuentras lo que está roto, no lo que está «mejorable».
  2. Correcciones que no necesitan test. Formularios que fallan en móvil, CTAs invisibles, enlaces rotos, pasos duplicados en el checkout. Eso se arregla y ya.
  3. Análisis del funnel por paso. Un paso que pierde 60% no necesita significancia estadística para justificar que lo toques.
  4. Investigación cualitativa. Cinco entrevistas a clientes recientes rinden más que un test que nunca va a cerrar.

Por qué existe

Los dos topes que casi ninguna calculadora aplica

Piso de 100 conversiones por variante. Por debajo de eso, un ganador es ruido aunque el cálculo diga que ya alcanzaste la muestra. Cuando este piso manda sobre la fórmula, la herramienta lo dice en pantalla en vez de esconderlo.

Techo de 8 semanas. Más allá, la estacionalidad y la pérdida de cookies contaminan el resultado. Y el mínimo son 2 semanas: menos no captura un ciclo semanal completo.

Cuando el veredicto sale rojo, la herramienta propone lo que sí funciona con ese volumen: auditoría de fricción con grabaciones, correcciones que no necesitan test, análisis del funnel por paso y entrevistas. Es el mismo trabajo útil con la etiqueta correcta.

Preguntas

Lo que suelen preguntarme

La prueba estándar de dos proporciones a dos colas, la misma que usan las calculadoras públicas de Evan Miller, Optimizely y VWO. Con una tasa base del 3%, α = 0.05 bilateral y potencia del 80%, devuelve 53,208 visitas por variante para detectar una mejora del 10%.

¿Te salió un número que no esperabas?

Mándamelo y te digo qué haría con ese caso en los primeros 30 días, sin que tengas que contratar nada. Si la respuesta honesta es que todavía no necesitas una agencia, también te la digo.