Définir la situation qui aurait existé sans la relance
Une personne fidèle peut acheter aujourd’hui même si elle ne reçoit aucun message. Pour estimer les ventes supplémentaires, il faut comparer les achats après la campagne avec ceux d’un groupe comparable qui poursuit son parcours habituel. Si votre scénario RCS remplace un SMS systématique, garder ce SMS pour le témoin mesure le gain du remplacement. Si le RCS s’ajoute au programme existant, gardez le programme existant dans les deux groupes et ajoutez uniquement la relance dans le groupe testé.
Définissez le résultat attendu au niveau du client. Vous pouvez compter les acheteurs distincts, les commandes ou la marge. Les trois mesures auront des valeurs différentes si quelques personnes achètent deux fois. Préparez également la durée d’observation et gardez le résultat principal inchangé pendant l’expérience.
Protéger la comparaison pendant toute la campagne
Affectez au hasard les clients éligibles, puis sauvegardez la liste avant l’envoi. La taille du témoin dépend du volume, du taux d’achat de départ et de la précision recherchée. Évitez d’y placer uniquement les personnes peu actives ou incompatibles RCS. Leur propension à acheter peut différer dès le départ. Traitez les messages de service et les opérations ordinaires de la même façon dans les deux groupes.
Une erreur fréquente consiste à exclure après coup les personnes qui n’ont pas ouvert le message. Or l’ouverture est déjà une conséquence possible du traitement. Gardez-les dans leur groupe initial pour mesurer la décision d’envoyer. Vous pouvez étudier les lecteurs séparément pour comprendre le parcours, sans les substituer au groupe de départ.
Calculer le gain absolu puis juger sa précision
Exemple fictif. Le groupe sollicité compte 180 acheteurs sur 6 000 personnes, soit 3 %. Le témoin compte 50 acheteurs sur 2 000 personnes, soit 2,5 %. Au rythme du témoin, on attendrait 150 acheteurs sur 6 000. Le gain estimé est donc de 30 acheteurs, soit 0,5 point ou 20 % de hausse relative. Pour 600 € de coût supplémentaire, cela correspond à 20 € par acheteur additionnel estimé.
Cette différence est une estimation sujette aux variations d’échantillonnage. Demandez un intervalle d’incertitude adapté et examinez les jours suivant l’offre. Si les achats augmentent immédiatement puis reculent d’autant la semaine suivante, la campagne a pu avancer des achats. Un résultat proche de zéro ou négatif invite à revoir le segment et le calendrier. Affichez-le tel quel pour que le prochain test s’appuie sur les bons ordres de grandeur.