Comment mesurer l'impact d'une modification marketing et prouver qu'elle a fonctionné

L’équipe Changeline · Publié le · 8 min de lecture

Pour mesurer l'impact d'une modification marketing, notez sa date et son heure exactes, comparez des périodes avant et après de même durée qui excluent la phase d'apprentissage et le délai de conversion, et vérifiez un groupe témoin qui n'aurait pas dû bouger. Si seule la campagne, la page ou la région modifiée a bougé, la modification est la cause probable.

Que veut dire mesurer l'impact d'une modification marketing ?

Mesurer l'impact d'une modification, c'est estimer l'écart entre ce qui s'est passé après elle et ce qui se serait passé sans elle. Ce second chiffre n'apparaît jamais dans le rapport : chaque méthode sert à en construire une estimation crédible.

Il existe trois niveaux de preuve, et il vaut mieux savoir lequel vous utilisez avant de présenter un résultat :

MéthodeCe que vous comparezSoliditéRisque principal
Avant/aprèsLa même campagne avant et après la modificationFaibleLa saisonnalité, d'autres modifications et le marché ressemblent à un impact
Avant/après avec témoinLe groupe modifié face à un groupe similaire non modifiéMoyenneLe témoin a aussi été touché ou se comporte autrement
Test randomiséDeux versions diffusées en même temps sur un trafic partagéForteVolume ou durée insuffisants pour conclure

La plupart des équipes s'arrêtent au premier niveau, puis en débattent à la réunion suivante. La suite de l'article montre comment monter d'un niveau avec les données dont vous disposez déjà.

Comment construire une comparaison avant/après qui tient la route ?

Utilisez des périodes de même durée, retirez les jours instables qui suivent la modification et attendez que les conversions remontent. Une période mal choisie peut à elle seule créer ou masquer un effet de 20 %.

  1. Notez l'heure exacte de la modification. Date, heure et fuseau horaire. Une stratégie d'enchères changée un mardi à 18 h rend ce mardi « mixte » : excluez-le des deux périodes.
  2. Comparez des périodes égales avec les mêmes jours de la semaine. 14 jours contre 14 jours, ou 4 semaines pleines contre 4 semaines pleines, pour comparer les lundis aux lundis.
  3. Écartez la phase d'apprentissage. Les enchères automatiques ont besoin de temps pour se stabiliser. Dans ses propres tests, Google écarte les 7 premiers jours de données et décrit une période de 7 à 14 jours où les données peuvent être volatiles. Appliquez la même logique à vos analyses manuelles.
  4. Attendez le délai de conversion. Google Ads peut enregistrer des conversions jusqu'à 90 jours après le clic, selon votre fenêtre de conversion. Les jours récents paraissent moins bons qu'ils ne le seront, car une partie des internautes n'a pas encore converti. Consultez le segment Conversions > Nombre de jours avant une conversion pour connaître le délai habituel de vos clients.
  5. Écrivez l'effet attendu avant de regarder. Précisez quel indicateur doit bouger, dans quel sens et à peu près de combien. Vous évitez ainsi de retenir l'indicateur qui, par hasard, a l'air bon.

Exemple : une équipe change la landing page d'une campagne sur le Réseau de Recherche un mercredi à 10 h. Elle compare les 28 jours précédents aux jours 8 à 35 suivants et ne lit les conversions que lorsque les clics sont plus anciens que le délai de conversion habituel.

Comment utiliser un groupe témoin quand un test est impossible ?

Choisissez quelque chose que vous n'avez pas modifié et qui évolue habituellement comme ce que vous avez modifié, puis retranchez son évolution. Ce qui reste est une bien meilleure estimation de l'impact.

Groupes témoins utiles en marketing :

  • Une campagne ou un groupe d'annonces similaire laissé intact
  • Une région, un département ou un magasin où la modification n'a pas été déployée
  • Une gamme de produits ou un service avec la même saisonnalité
  • Les mêmes semaines de l'année précédente, pour les activités saisonnières

Exemple avec des chiffres fictifs :

AvantAprèsÉvolution
Campagne A (nouvelle landing page)4,0 % de conversion4,6 % de conversion+15 %
Campagne B (témoin, inchangée)3,8 % de conversion4,1 % de conversion+8 %

Avec un simple avant/après, la nouvelle page aurait augmenté le taux de conversion de 15 %. Le témoin montre que le marché a fait monter l'ensemble d'environ 8 % : la page explique donc à peu près les 7 % restants. C'est le principe d'une lecture en différence de différences.

Pour aller plus loin, le package open source CausalImpact de Google construit un scénario contrefactuel à partir de séries témoins. Sa documentation pose clairement les conditions : les témoins ne doivent pas être touchés par l'intervention et leur relation avec votre indicateur doit rester stable après la modification. Sinon, le modèle peut surestimer ou sous-estimer l'effet.

Quand faut-il lancer un vrai test ?

Lancez un test quand la décision coûte cher ou se défait difficilement : nouvelle stratégie d'enchères, passage en requête large, nouvelle landing page sur votre plus grosse campagne. Diffuser les deux versions en même temps retire la saisonnalité et le marché de la comparaison.

Dans Google Ads, les tests personnalisés sont disponibles pour les campagnes sur le Réseau de Recherche, Display, vidéo et hôtels, mais pas pour les campagnes pour applications ni Shopping. Ils se trouvent dans Campagnes > Tests. Les points de l'aide Google qui comptent pour une lecture propre :

  • Google recommande une répartition du budget à 50 % pour la meilleure comparaison.
  • La répartition Basé sur les cookies ne montre qu'une version à chaque internaute ; la répartition Basé sur les recherches peut atteindre la significativité plus vite, mais un internaute peut voir les deux.
  • Laissez tourner le test au moins 4 à 6 semaines, davantage si votre délai de conversion est long.
  • Ne lancez pas plusieurs tests à la fois et évitez de modifier souvent les budgets ou les objectifs pendant le test.
  • La répartition du trafic ne peut plus être modifiée une fois le test lancé.

Un résultat non concluant reste un résultat : la modification n'a pas produit d'effet assez grand pour être détecté avec votre volume. Google conseille lui-même de choisir des campagnes à fort volume et de prolonger le test.

Pourquoi des modifications simultanées faussent-elles la mesure ?

Si deux modifications tombent dans la même période, vous ne pouvez pas séparer leurs effets, quelle que soit la méthode. Le chevauchement est la première cause d'échec d'une mesure.

Avant de lire un résultat, isolez la cause :

  1. Placez toutes les modifications sur une seule frise chronologique. Couvrez les jours avant et après : les modifications de votre équipe dans Google Ads, Meta Ads et les autres plateformes, les recommandations appliquées automatiquement, les ajustements Smart Bidding ou Advantage+, les mises en production du site, les changements de balises et de consentement, les changements dans le CRM ou l'attribution des leads, les prix et les événements extérieurs.
  2. Écartez d'abord le tracking. Une balise cassée, une conversion en double ou une nouvelle bannière cookies peuvent ressembler à une évolution de performance. Vérifiez que les conversions de la plateforme publicitaire, de GA4 et du CRM concordent toujours.
  3. Testez une hypothèse à la fois. Si la frise montre une seconde modification dans la période, raccourcissez la période pour l'éviter, ou présentez les deux ensemble en le disant clairement.

L'historique des modifications Google Ads couvre les modifications du compte, mais pas le site, le tracking ni le CRM. Les variations saisonnières sont un autre chevauchement ; voir comment distinguer la saisonnalité de vos propres modifications.

Comment consigner une modification pour pouvoir la mesurer plus tard ?

Consignez la modification au moment où vous la faites, avec assez de détails pour que quelqu'un puisse la mesurer un mois plus tard sans vous poser de questions. La mémoire et les fils de discussion ne survivent pas au rapport suivant.

Notez au minimum :

  • Date, heure et fuseau horaire
  • Responsable et client ou projet
  • Ce qui a changé, sous la forme avant → après (par exemple CPA cible 40 € → 32 €)
  • Périmètre : compte, campagnes, pages ou régions concernés
  • Hypothèse et effet attendu
  • Indicateur, période et témoin retenus, plus une date de revue

GA4 permet d'ajouter des notes aux rapports : faites un clic droit sur un point d'un graphique en courbes, choisissez Ajouter une annotation, puis Créer une annotation. Le titre est limité à 60 caractères, la description à 150, et une propriété accepte jusqu'à 1 000 annotations ; il faut au moins le rôle Analyste pour en créer. C'est un repère, pas la fiche complète ci-dessus, et cela ne couvre que ce que vous regardez dans GA4. Voir le guide des annotations GA4.

Un journal des modifications marketing partagé garde toutes les modifications, de toutes les plateformes, sur une seule frise chronologique par client. Changeline le fait aujourd'hui avec des saisies manuelles, des responsables, des tags et des motifs ; vous pouvez créer un journal des modifications gratuitement pendant l'accès anticipé.

Comment présenter l'impact d'une modification à un client ?

Présentez le verdict, le niveau de preuve et la décision en cinq lignes. Un client fait davantage confiance à une méthode claire qu'à un gros chiffre.

  1. Modification : ce qui a changé, quand et par qui.
  2. Périodes : les dates avant et après, sans phase d'apprentissage ni délai de conversion.
  3. Témoin : à quoi vous avez comparé, ou l'absence de témoin.
  4. Résultat : l'effet estimé et le niveau de preuve (avant/après, témoin, test).
  5. Décision : conserver, revenir en arrière ou prolonger le test.

Si le résultat est mitigé, dites-le. « Aucun effet mesurable après 6 semaines » est une conclusion utile qui fait économiser du budget. Si l'indicateur a baissé au lieu de monter, les étapes de l'analyse des causes racines en marketing et le guide pour expliquer une baisse de conversions à un client vous aident à structurer l'échange.

FAQ

Combien de temps attendre avant de mesurer une modification marketing ?

Attendez la fin de la phase d'apprentissage et la remontée des conversions. Google écarte les 7 premiers jours de données de ses tests et recommande 4 à 6 semaines de test. Vérifiez aussi votre délai de conversion habituel dans le segment Nombre de jours avant une conversion, car des clics récents peuvent encore convertir.

Qu'est-ce qu'un groupe témoin en marketing ?

C'est une campagne, une région, un produit ou une période que vous n'avez pas modifié, mais qui se comporte habituellement comme ce que vous avez modifié. Retrancher son évolution de votre résultat élimine la saisonnalité et les effets de marché, ce qu'un simple avant/après ne permet pas.

Peut-on mesurer deux modifications faites le même jour ?

Pas séparément avec une lecture avant/après, car leurs effets se mélangent dans la même période. Présentez-les ensemble, ou testez l'une d'elles dans un test où seule cette modification diffère entre les deux versions.

Un simple avant/après suffit-il parfois ?

Il peut suffire pour des modifications mineures et faciles à annuler sur des comptes stables, si vous utilisez des périodes égales, écartez les jours d'apprentissage et vérifiez que rien d'autre n'a changé. Pour les décisions coûteuses, ajoutez un groupe témoin ou lancez un test.

Que faire si le résultat n'est pas concluant ?

Considérez-le comme une conclusion : la modification n'a pas produit d'effet assez grand pour être détecté avec votre volume. Vous pouvez prolonger le test, choisir une campagne à plus fort volume ou décider en fonction du coût et du risque plutôt que de l'indicateur.

Sources

  1. Google Ads Help: Set up a custom experiment
  2. Google Ads Help: Experiments FAQs
  3. Google Ads Help: Find out how long it takes for your customers to convert
  4. Google Ads Help: Performance fluctuations and conversion delay
  5. Google Analytics Help: Annotations
  6. CausalImpact: an R package for causal inference using Bayesian structural time-series models

Toutes vos modifications sur une seule frise

Changeline est un journal des modifications marketing pour les agences et les équipes growth. Consignez une modification en quelques secondes et voyez-la à côté de tous les autres canaux. Gratuit pendant l’accès anticipé.

Commencer gratuitement