Significancia sin estadística

La pregunta detrás de toda la matriz: ¿cuánta data es “evidencia fuerte”? La respuesta académica requiere estadística; la del oficio requiere tres reglas de dedo y una intuición bien calibrada sobre el azar. Esta lección te da las del media buyer — suficientes para decidir bien sin doctorado, y para no ser víctima del porcentaje con base chica.

La intuición madre: el azar hace rachas

Tirá una moneda 10 veces: sacar 7 caras es completamente normal (pasa seguido). Tirala 1000: sacar 700 es imposible sin trampa. El mismo porcentaje (70%) significa nada o todo según la base — y las campañas chicas viven en el mundo de las 10 tiradas: tu anuncio A con 3 leads de 50 clicks vs. el B con 1 de 45 NO te dijo cuál es mejor — te mostró una racha. La mitad de los “ganadores claros” de la semana 1 son monedas calientes.

Las tres reglas de dedo del oficio

1. La regla del 10× para comparar costos — para decir “A es más barato que B” con confianza de oficio: cada lado necesita al menos ~10 resultados (leads). Con menos, la diferencia de CPA entre anuncios es clima, no señal. (Por eso la semana 1 observa y no sentencia — los 10 por lado tardan en juntarse.)
2. La regla de la persistencia — la señal real SOSTIENE: el desvío que aparece 3-4 días seguidos (o en dos lecturas semanales) merece el árbol; el pico de un día merece el diario. El tiempo es tu test de significancia gratuito.
3. La regla de la magnitud — las diferencias chicas (10-20%) en bases chicas son invisibles al ojo del oficio: no las persigas. Las diferencias grandes (2×, 3×) con datos decentes son reales casi siempre: la señal fuerte grita — si tenés que entrecerrar los ojos para verla, no está.

El costo de la certeza (la calibración final)

La pregunta trampa: “¿y por qué no esperar SIEMPRE a tener certeza total?” Porque la certeza también se compra con plata y tiempo: esperar 10× resultados por lado en un experimento de presupuesto chico puede costar más que el error que evitás. El balance profesional: decisiones grandes (matar un ángulo, escalar fuerte) piden evidencia fuerte; decisiones chicas y reversibles (rotar un creativo fatigado, pausar el claramente muerto) se toman con menos — el costo del error chico es menor que el costo de la espera larga. La significancia se compra en proporción al tamaño de la decisión.

A lectura.md, mis umbrales de decisión:

1. MI tabla de "cuánto alcanza": para cada decisión típica (declarar
   ganador entre anuncios / matar un ángulo / detectar fatiga /
   escalar) — el umbral de datos con MIS volúmenes (la cuenta:
   ¿cuántos días tarda mi presupuesto en juntar 10 leads por lado?).
2. La regla anti-porcentaje-trucho para mis reportes (y los del
   M8): todo porcentaje se reporta CON su base ("3 de 41" al lado
   del "7,3%") — el porcentaje desnudo con base chica está
   prohibido en mis documentos.
3. El recordatorio de la moneda, donde lo vea: "¿señal o racha?"

Sabés cuánta data alcanza. Cierre del módulo: la revisión semanal — el ritual que junta métricas, árbol, matriz y umbrales en los 30 minutos que gobiernan la cuenta.