Attribuzione, incrementalità o MMM: quale metodo per quale decisione?
Attribuzione, esperimento e MMM non rispondono alla stessa domanda. Il selettore propone un orientamento didattico trasparente; non sostituisce né l'inquadramento dell'estimando, né l'audit dei dati, né una revisione scientifica.
Scegliete un’opzione per riga. Il risultato è orientamento didattico, non validazione scientifica.
Marketing Mix Modeling + Triangolazione
Parità a 8 punti: confrontate i metodi con il costo dell’errore, la fattibilità e il livello di prova richiesto.
| Metodo | Punteggio | Stato | Uso |
|---|---|---|---|
| Marketing Mix Modeling | 8 punti | orientamento a pari merito | da convalidare |
| Triangolazione | 8 punti | orientamento a pari merito | da convalidare |
| Esperimento | 4 punti | alternativa | da convalidare |
| Attribuzione | 2 punti | alternativa | da convalidare |
Orientamento didattico · la decisione finale è umana
Approfondimento
Comprendere il meccanismo prima di utilizzare lo strumento.
Misurare il marketing significa stimare che cosa sarebbe accaduto senza l’azione. La metrica osservata non è ancora l’effetto causale.Il metodo dipende dalla decisione, dalla grana, dall’orizzonte e dal controfattuale disponibile. Attribuzione, esperimento e modello aggregato rispondono a domande diverse e vanno triangolati.
Definire popolazione, intervento, comparatore, risultato e orizzonte prima di scegliere il metodo: è l’estimando che l’analisi deve davvero identificare.
Allineare periodo di esposizione, ritardo dell’effetto e finestra di risultato; prevenire anticipazione, contaminazione ed effetti riportati.
Costruire esplicitamente il controfattuale: randomizzazione se possibile, altrimenti ipotesi di identificazione e diagnostiche verificabili.
Riportare intervallo, potenza, distorsione residua, sensibilità e ampiezza economicamente rilevante, non solo una significatività statistica.
Una misurazione diventa decisionale quando il suo intervallo separa le opzioni e l’effetto plausibile supera il costo e il rischio di agire.
Punti di attenzione
Le distinzioni che impediscono una lettura errata.
Ripartisce un risultato osservato secondo una regola; non identifica necessariamente ciò che il marketing ha creato.
Confronta il risultato esposto con il risultato controfattuale, controllando le differenze sistematiche.
La validità interna riguarda la causa nello studio; la validità esterna riguarda il trasferimento ad altri contesti.
Protocollo
Dall’inquadramento alla convalida.
Definire popolazione, intervento, confronto, risultato e orizzonte prima di scegliere il metodo.
Randomizzare se possibile; altrimenti giustificare ipotesi di identificazione e diagnostiche.
Riportare intervallo, potenza, sensibilità e ampiezza economicamente rilevante.
Confrontare esperimento, modello aggregato, dati operativi e conoscenza del meccanismo.
Un ROAS osservato può essere molto superiore al ROAS incrementale
Situazione. A una campagna sono attribuite 1 000 conversioni a 100 € di margine, per 40 000 € di spesa. Un test stima che solo il 35 % sia incrementale.
Calcolo. ROAS di margine osservato: 100 000 ÷ 40 000 = 2,5. ROAS incrementale: 35 000 ÷ 40 000 = 0,875.
Decisione. L’attribuzione descrive dove le conversioni sono state registrate; il test cambia la decisione economica.
Revisione critica
Cinque domande da risolvere prima di presentare una raccomandazione.
- L’unità è azionabile?
Verificare che corrisponda al livello al quale una decisione può essere eseguita e monitorata. Una media più ampia può invertire la lettura nascondendo segmenti, canali o periodi in perdita.
- L’orizzonte copre il meccanismo?
Ricalcolare la conclusione su una finestra breve e su una lunga. Costi immediati, fidelizzazione, saturazione ed effetti differiti non si materializzano nello stesso momento.
- Il comparatore rappresenta davvero l’assenza di azione?
Spiegare che cosa sarebbe accaduto senza la decisione. Una tendenza storica o un’attribuzione di contatti non basta se selezione, stagionalità o cambiamenti simultanei restano attivi.
- Quale ipotesi fa ribaltare la scelta?
Individuare il parametro che cambia la classifica, pubblicare il suo intervallo plausibile e mostrare lo scenario prudente. Una raccomandazione senza sensibilità nasconde il suo rischio principale.
- Chi ferma o rivede la decisione?
Indicare il responsabile, il segnale osservato, la soglia e la data di revisione. Senza regola di arresto, un pilota favorevole diventa facilmente un impegno permanente mai rivalutato.
Condizioni di accettazione
Ciò che deve essere vero prima di agire.
- Scrivere la quantità causale cercata prima del piano di analisi.
- Riportare l’incertezza statistica e la soglia di rilevanza economica.
- Non mescolare mai conversioni attribuite e incrementali nello stesso rapporto.
Limiti
Ciò che l’analisi non dimostra.
- Un esperimento con potenza insufficiente non dimostra l’assenza di effetto.
- La contaminazione tra i gruppi riduce la differenza misurabile.
- Un risultato locale e breve non si trasferisce automaticamente a tutti i mercati e orizzonti.
Riferimenti
Lavori utilizzati per inquadrare il metodo.
- Rubin, D. B. (1974), « Estimating Causal Effects of Treatments in Randomized and Nonrandomized Studies ».
- Holland, P. W. (1986), « Statistics and Causal Inference », Journal of the American Statistical Association.
- Lewis, R. A. & Rao, J. M. (2015), Quarterly Journal of Economics.
Da esplorare dopo
Proseguite nello stesso ragionamento.
Quale metodo produce evidenza adatta alla decisione?
Tornare al tema →Tema correlatoKPI di marketing: contratto di misurazione e caso numericoDefinire un KPI per decisione, formula, fonte, finestra e guardrail con una cascata economica e un modello scaricabile.
Leggere →Tema correlatoCausalità nel marketing: bias, controfattuale e diagnosiComprendere i bias di selezione, la causalità inversa, le variabili omesse e la mediazione prima di attribuire un effetto di marketing.
Leggere →Tema correlatoIncrementalità di marketing: metodi e scelta del controfattualeConfronto critico dei metodi di incrementalità, criteri di scelta, calcolo del lift e regole di utilizzo.
Leggere →Tema correlatoTest geografico di marketing: disegno, potenza e biasCostruire un test geografico con mercati appaiati, effetto minimo rilevabile, controllo degli spillover e set di dati.
Leggere →Tema successivoMarketing Mix ModelingCollegare dati, modello, convalida, allocazione e governance.
Esplorare →