Attribution, incrémentalité ou MMM : quelle méthode pour quelle décision ?

Attribution, expérience et MMM ne répondent pas à la même question. Le sélecteur propose une orientation pédagogique transparente ; il ne remplace ni le cadrage de l’estimand, ni l’audit des données, ni une revue scientifique.
Outil interactifHypothèses visiblesExport disponible

Statut pédagogique

Niveau pédagogique documenté

Méthode et sources vérifiées ; résultats empiriques de la source non reproduits. Cette page n’établit ni performance observée, ni effet causal démontré, ni validation scientifique complète.

Affirmations couvertes
Partiel · 2 affirmations reliées à une source.
Reproduction de la source
Partielle · les résultats empiriques ne sont pas reproduits.
Artefacts contrôlés
7 vérifiés.
Éléments non fournis
jeu de données, dictionnaire, exécution R, revue SPSS, revue SAS : leur absence est documentée, elle n’est pas comblée.
Sélecteur de méthode de mesureOUTIL / MEASURE-01

Choisissez une option par ligne. Le résultat est une orientation pédagogique fondée sur un barème visible, jamais une validation scientifique ou une recommandation opérationnelle.

Données
Expérimentation
Horizon
Question
Orientation pédagogique

Marketing Mix Modeling + Triangulation

Égalité à 8 points : confrontez les méthodes au coût d’erreur, à la faisabilité et au niveau de preuve requis.

MéthodeScoreStatutUsage
Marketing Mix Modeling8 pointsorientation ex aequoà valider
Triangulation8 pointsorientation ex aequoà valider
Expérimentation4 pointsalternativeà valider
Attribution2 pointsalternativeà valider
Barème expliciteTest possible : +4 expérimentation, +2 triangulation ; test difficile : +2 MMM. Données riches : +3 MMM, +2 attribution et +2 triangulation ; peu de données : +1 expérimentation. Horizon rapide : +3 attribution ; horizon long : +2 MMM et +2 triangulation. Mix complet : +3 MMM et +2 triangulation ; parcours digital : +3 attribution.
Condition de blocageSi la population, l’intervention, le comparateur, le résultat, l’horizon ou la comparabilité des données ne sont pas documentés, le score ne doit pas être utilisé pour engager une méthode.

Orientation pédagogique · décision finale humaine

Approfondissement

Comprendre le mécanisme avant d’utiliser l’outil.

Mesurer le marketing revient à estimer ce qui se serait produit sans l’action. La métrique observée n’est pas encore l’effet causal.

La méthode dépend de la décision, du grain, de l’horizon et du contrefactuel disponible. Attribution, expérience et modèle agrégé répondent à des questions différentes et doivent être triangulés.

01Unité d’analyse

Définir population, intervention, comparateur, résultat et horizon avant de choisir la méthode : c’est l’estimand que l’analyse doit réellement identifier.

02Horizon

Aligner période d’exposition, délai d’effet et fenêtre de résultat ; prévenir anticipation, contamination et effets reportés.

03Comparaison

Construire explicitement le contrefactuel : randomisation si possible, sinon hypothèses d’identification et diagnostics vérifiables.

04Incertitude

Rapporter intervalle, puissance, biais résiduel, sensibilité et ampleur économiquement pertinente, pas seulement une significativité statistique.

05Seuil de décision

Une mesure devient décisionnelle lorsque son intervalle distingue les options et que l’effet plausible dépasse le coût et le risque d’action.

Points de vigilance

Les distinctions qui empêchent une mauvaise lecture.

01Attribution

Elle répartit un résultat observé selon une règle ; elle n’identifie pas nécessairement ce que le marketing a créé.

02Incrémentalité

Elle compare résultat exposé et résultat contrefactuel en contrôlant les différences systématiques.

03Validité

La validité interne concerne la cause dans l’étude ; la validité externe concerne le transfert à d’autres contextes.

Protocole

Du cadrage à la validation.

01Formuler l’estimand

Définir population, intervention, comparaison, résultat et horizon avant de choisir la méthode.

02Concevoir le contrefactuel

Randomiser si possible ; sinon justifier hypothèses d’identification et diagnostics.

03Quantifier l’incertitude

Rapporter intervalle, puissance, sensibilité et ampleur économiquement pertinente.

04Trianguler

Comparer expérience, modèle agrégé, données opérationnelles et connaissance du mécanisme.

CAS CHIFFRÉ

Un ROAS observé peut être très supérieur au ROAS incrémental

Situation. Une campagne reçoit 1 000 conversions à 100 € de marge, pour 40 000 € de dépense. Un test estime que 35 % seulement sont incrémentales.

Calcul. ROAS de marge observé : 100 000 ÷ 40 000 = 2,5. ROAS incrémental : 35 000 ÷ 40 000 = 0,875.

Décision. L’attribution décrit où les conversions ont été enregistrées ; le test change la décision économique.

Revue contradictoire

Cinq questions à résoudre avant de présenter une recommandation.

  1. L’unité est-elle actionnable ?

    Vérifier qu’elle correspond au niveau auquel une décision peut être exécutée et suivie. Une moyenne plus large peut inverser la lecture en masquant segments, canaux ou périodes déficitaires.

  2. L’horizon couvre-t-il le mécanisme ?

    Recalculer la conclusion sur une fenêtre courte et une fenêtre longue. Les coûts immédiats, la rétention, la saturation et les effets différés ne se matérialisent pas au même moment.

  3. Le comparateur représente-t-il vraiment l’absence d’action ?

    Expliquer ce qui se serait produit sans la décision. Une tendance historique ou une attribution de contacts ne suffit pas si sélection, saisonnalité ou changements simultanés restent actifs.

  4. Quelle hypothèse fait basculer le choix ?

    Identifier le paramètre qui change le classement, publier sa plage plausible et montrer le scénario prudent. Une recommandation sans sensibilité cache son principal risque.

  5. Qui arrête ou révise la décision ?

    Nommer le responsable, le signal observé, le seuil et la date de revue. Sans règle d’arrêt, un pilote favorable devient facilement un engagement permanent non réévalué.

Conditions d’acceptation

Ce qui doit être vrai avant d’agir.

  • Écrire la quantité causale recherchée avant le plan d’analyse.
  • Rapporter incertitude statistique et seuil de pertinence économique.
  • Ne jamais mélanger conversions attribuées et conversions incrémentales dans un même ratio.

Limites

Ce que l’analyse ne prouve pas.

  • Une expérience sous-puissante ne prouve pas l’absence d’effet.
  • La contamination entre groupes réduit la différence mesurable.
  • Un résultat local et court ne se transfère pas automatiquement à tous les marchés et horizons.

Références

Travaux mobilisés pour cadrer la méthode.

  • Rubin, D. B. (1974), « Estimating Causal Effects of Treatments in Randomized and Nonrandomized Studies ».
  • Holland, P. W. (1986), « Statistics and Causal Inference », Journal of the American Statistical Association.
  • Lewis, R. A. & Rao, J. M. (2015), Quarterly Journal of Economics.