Elegir un método de marketing por estimando, sesgo y decisión.
Qué hay que distinguir
Tres condiciones antes de cualquier cálculo.
Objeto estimado
Un ROAS atribuido, un lift experimental y una contribución MMM no designan la misma cantidad. Numerador, denominador, ventana, población y contrafactual se escriben antes de comparar los resultados.
Identificación antes que precisión
Un intervalo estrecho alrededor de un estimador sesgado no constituye evidencia fuerte. Aleatorización, discontinuidad, variación exógena o supuestos de control definen lo que es identificable; el tamaño de muestra determina después la precisión.
Decisión compatible
Un método puede ser excelente para detectar una anomalía e inadecuado para asignar un presupuesto anual. Frecuencia, granularidad y dominio de transporte deben corresponder al ritmo y al perímetro de la decisión.
Método
De la pregunta de negocio al dispositivo de evidencia
- 01Escribir el estimando
Especificar tratamiento, resultado, unidad, población, comparador y horizonte — por ejemplo, el efecto medio incremental de una campaña de vídeo nacional sobre las ventas netas semanales durante ocho semanas en los hogares elegibles.
- 02Cartografiar los sesgos
Enumerar selección, segmentación, estacionalidad, anticipación, interferencia, medición incompleta y cambio de composición, y evaluar cuáles suprime, reduce o deja intactos el diseño.
- 03Comparar viabilidad y resolución
Evaluar coste, plazo, potencia, granularidad y frecuencia de repetición; un experimento demasiado pequeño puede ser menos útil que un cuasi-experimento robusto, y un MMM puede iluminar la cartera pero no una creatividad concreta.
- 04Planificar la triangulación
Asociar un método principal y una evidencia de calibración, y definir de antemano cómo tratar una divergencia — revisar perímetro, supuestos, transporte o calendario, sin promediar automáticamente.
El mapa estimando–método–sesgo
Seis métodos se comparan según el contrafactual, el grano, el horizonte, el sesgo dominante y la decisión que realmente pueden respaldar.
| Método | Objeto estimado | Contrafactual | Decisión | Identificación |
|---|---|---|---|---|
| Atribución | Reparto | Regla | Ejecución | baja |
| Test A/B | Efecto medio | Aleatorización | Producto / precio | fuerte |
| Test geográfico | Efecto agregado | Zonas de control | Medios | fuerte |
| Cuasi-exp. | Efecto local | Variación exógena | Política | medio |
| MMM | Contribución | Modelo condicional | Cartera | medio |
| Encuesta | Declaración | Respuesta | Diagnóstico | baja |
Tres ROAS responden a tres preguntas diferentes
Una campaña de búsqueda muestra un ROAS atribuido de 6,2. Una prueba de pausa en zonas comparables estima un ROAS incremental de 1,8 ± 0,6. El MMM anual atribuye al canal un ROAS de 2,4 ± 0,9, incluyendo parte de los efectos diferidos.
La atribución reparte 620 k€ de ventas observadas para 100 k€ de gasto. La prueba estima 180 k€ de ventas que no habrían tenido lugar, con un intervalo de 120 k€ a 240 k€. El MMM estima 240 k€ en un horizonte más largo, pero confunde parcialmente búsqueda de marca y actividad de vídeo. Con un 35 % de margen, la contribución incremental central de la prueba es 63 k€, es decir 0,63 € por euro gastado.
El ROAS 6,2 sigue siendo útil para gobernar las consultas y la calidad del tráfico; no justifica el incremento de presupuesto. La prueba sostiene la decisión marginal inmediata y el MMM ilumina el equilibrio anual. La divergencia se convierte en una hipótesis de sinergia por probar.
Condiciones de aceptación
Lo que debe cumplirse para actuar.
- 01
El estimando se formula antes de la elección del método.
- 02
El sesgo dominante y el contrafactual se publican con el resultado.
- 03
La decisión permanece en el dominio observado o justifica su transporte.
- 04
Una divergencia entre métodos desencadena un diagnóstico, nunca un promedio automático.
Límites
Lo que este análisis no demuestra.
- Ningún mapa sustituye el examen del diseño y de los datos reales.
- El mejor método teórico puede ser inejecutable o insuficientemente potente.
- Los efectos rara vez se transportan sin supuestos entre segmentos, periodos e intensidades.
Referencias
Trabajos citados.
- Hernán, M. A. & Robins, J. M. (2020), Causal Inference: What If.
- Imbens, G. W. & Rubin, D. B. (2015), Causal Inference for Statistics, Social, and Biomedical Sciences.
- Pearl, J. & Mackenzie, D. (2018), The Book of Why.
