Estimand identique
iROAS marginal, ROAS moyen, ventes attribuées et lift de considération ne sont pas interchangeables. Écrire précisément traitement, résultat, population et horizon avant comparaison.
Analyse expert · Révisée le 22.08.2026
Ce qu’il faut distinguer
iROAS marginal, ROAS moyen, ventes attribuées et lift de considération ne sont pas interchangeables. Écrire précisément traitement, résultat, population et horizon avant comparaison.
Deux méthodes utilisant les mêmes données et la même sélection ne constituent pas deux preuves indépendantes. La valeur de triangulation augmente lorsque les faiblesses sont différentes.
Un écart n’est pas résolu par vote majoritaire. Il déclenche une analyse de calendrier, ciblage, saturation, contamination, définition et transportabilité.
Méthode
Construire une fiche par méthode avec traitement, contrefactuel, résultat, population, période et unité. Exclure les mesures qui répondent à une autre question.
Documenter sélection, confusion, contamination, erreur de mesure, spécification et extrapolation. Indiquer si deux méthodes partagent la même faiblesse.
Mettre estimations et incertitudes sur une échelle commune. Une divergence ponctuelle peut disparaître lorsque les intervalles sont honnêtement présentés.
Combiner par pondération d’incertitude seulement les estimations compatibles. Sinon, conserver plusieurs chiffres et définir la décision robuste à leur plage.
Quatre méthodes sont comparées sur effet mesuré, horizon, biais dominant et rôle décisionnel. Seules deux entrent dans la synthèse causale.
| Méthode | Estimand | Résultat | Intervalle | Biais dominant | Rôle |
|---|---|---|---|---|---|
| Expérience | iROAS marginal | 1,40 | 0,90–1,90 | Sélection faible | Synthèse |
| MMM | iROAS historique | 1,80 | 1,20–2,40 | Spécification | Synthèse |
| Attribution | Ventes créditées | 3,20 | non causal | Sélection forte | Parcours |
| Enquête | Considération | +6 pts | ±3 pts | Déclaratif | Mécanisme |
Une expérience estime 1,40 avec un écart-type de 0,255 ; un MMM compatible estime 1,80 avec 0,306. Une attribution affiche 3,20 mais mesure des conversions créditées, pas un effet causal.
Pondération inverse de variance : poids 15,38 et 10,68. Synthèse = (1,40 × 15,38 + 1,80 × 10,68) ÷ 26,06 = 1,56. Écart-type = √(1 ÷ 26,06) = 0,196 ; intervalle approximatif 1,18–1,95.
L’attribution reste utile pour le parcours mais n’entre pas dans la moyenne causale. La décision budgétaire s’appuie sur 1,56 et teste sa robustesse jusqu’à 1,18.
Conditions d’acceptation
Traitement, population, résultat et horizon sont alignés avant comparaison.
Les dépendances de données et de biais entre méthodes sont documentées.
Seules les estimations compatibles entrent dans une synthèse quantitative.
La décision est testée sur l’intervalle, pas seulement sur la moyenne.
Limites
Références