# Groupe de contrôle (bêta fermée) ## Qu'est-ce qu'un groupe témoin ? Un groupe témoin est très utile pour mesurer la performance d'une campagne. Un groupe témoin est un petit groupe d'utilisateurs (un **pourcentage d'utilisateurs** des segments associés) qui est **volontairement non exposé à une publicité ou à un email** afin de **mesurer la différence en termes d'engagement ou de conversion** entre la population non exposée (groupe témoin) et la population exposée (utilisateurs dans les segments associés). Dans notre cas, nous ne prenons pour l'instant en compte que les conversions (achats en ligne et hors ligne). ## Comment cela fonctionne-t-il ? Un groupe témoin se configure sur un stream (menu de partage). Cochez la case « Set control group » pour activer la possibilité de configurer un groupe témoin. ![](/files/95dc98396697205b70e1f029b2703b271a7dba0b) Spécifiez le % d'utilisateurs que vous souhaitez définir pour votre groupe témoin : ces utilisateurs ne seront pas poussés sur le stream (et donc pas exposés à la campagne). 10 % sont généralement suffisants pour obtenir des indicateurs statistiquement significatifs, cependant pour des segments très petits, il est recommandé de doubler ce %. Dès que vous lancez le stream, le groupe témoin sera également lancé, et les résultats seront enregistrés. ### \*\*\*\*:warning: **Limitations** * faites attention à la modification des streams avec un groupe témoin actif, car cela impacte les résultats sur le dashboard de performance de la campagne. De même pour les segments utilisés dans un stream avec un groupe témoin actif : si vous modifiez une condition, cela impacte tous les résultats. * Quand un stream est terminé, vous ne pouvez pas le relancer, vous devez le dupliquer ## Comment puis-je lire les résultats ? Lorsqu'un stream avec un groupe témoin est activé, une icône apparaîtra à droite du nom du stream sur la page de la liste des streams. ![](/files/5fe0d9ba42690de1a1821661f090eb5e5e11995e) Cliquez sur cette icône pour accéder à la partie analytics. Tout d'abord, sélectionnez la période d'analyse : vous pouvez par exemple choisir de lire les résultats sur les 3 derniers jours ou la semaine dernière. Tous les chiffres seront liés à cette période d'analyse. ![](/files/1b5c0debde2c35ace127fc616f639d8872bbf784) **Définition de chaque métrique :** **Population totale**: nombre d'utilisateurs dans les segments qui ont été sélectionnés sur le stream.\ Il est égal à `Audience activated + Groupe témoin`. **Audience activated**: nombre d'utilisateurs qui ont été poussés sur le stream (et exposés à la campagne).\ Il est égal à `segments associés – groupe témoin`. **Groupe témoin**: nombre d'utilisateurs dans le groupe témoin, cela représente le % d'utilisateurs sélectionnés pour être dans le groupe témoin et non exposés à la campagne.\ Il est égal à `segments associés – audience activée`. *** **Cartes** Vous avez ici quelques métriques liées aux conversions. Nous comparons la performance entre les utilisateurs exposés et non exposés en termes de conversions (achats en ligne et hors ligne). En détail : ### **Revenu incrémental** Le revenu incrémental représente l'impact de la campagne sur votre chiffre d'affaires. Tout commence par une supposition : si nous considérons la population totale dans le groupe témoin, quelles sont les performances, et quel est le revenu incrémental généré par la campagne ? Ce revenu incrémental peut être positif ou négatif, et il représente la performance et l'impact de la campagne. En détail, nous considérons la population totale d'utilisateurs (= Audience activated + utilisateurs dans le groupe témoin) et nous appliquons les résultats du groupe témoin pour le Taux de conversion et le Montant moyen du panier à tous ces utilisateurs : \\ ![](/files/25e1461b41c7882efec5531b2eafd2283381c66b) Ensuite, nous pouvons facilement comparer le revenu généré par l'Audience activated et le revenu simulé généré par la population totale comme groupe témoin et voir si le revenu incrémental est négatif ou positif. Formule : `Revenu incrémental = (Revenu généré par l'Audience activated + Revenu généré par le groupe témoin) - (Revenu simulé généré par la population totale comme groupe témoin)` ### **Taux de conversion** Pour chaque population, nous calculons ici le taux de conversion sur la période sélectionnée. Formule : `Taux de conversion = nombre de conversions ÷ nombre d'utilisateurs` (nous comparons le taux de conversion calculé pour la population « audience activée » et pour la population « groupe témoin ») #### **Uplift (% de différence du taux de conversion)** Représente l'impact de la campagne. Comme nous comparons les utilisateurs de l'audience activée et les utilisateurs du groupe témoin, nous devons déterminer l'impact de la campagne en termes de conversions. Si l'uplift est faible ou négatif, cela signifie que les utilisateurs du groupe témoin ont de bons résultats sans exposition à la campagne et que la campagne n'est donc pas aussi efficace qu'elle devrait l'être. À l'inverse, si l'uplift est élevé, cela signifie que la campagne surperforme, car les utilisateurs exposés à la campagne convertissent davantage que les utilisateurs du groupe témoin ; l'impact sur les achats est très positif. Formule : `Uplift = ((taux de conversion « Audience activated » - taux de conversion « groupe témoin ») ÷ taux de conversion « Audience activated ») x 100` ### **Revenu moyen par utilisateur (ARPU)** Nous comparons ici le revenu par utilisateur pour chaque population (audience activée et groupe témoin). Formule : `Revenu moyen par utilisateur (ARPU) = revenu total ÷ nombre d'utilisateurs` (nous comparons l'ARPU calculé pour la population « audience activée » et pour la population « groupe témoin ») ### **Montant moyen du panier** Nous comparons ici le montant moyen du panier pour chaque population. Formule : `Montant moyen du panier = revenu total ÷ nombre de conversions` (nous comparons le montant moyen du panier calculé pour la population « audience activée » et pour la population « groupe témoin ») **Graphiques** ![](/files/90514021b5846efcaa2ed22730d57cdf6d54fd8f) ### Évolution du taux de conversion Vous pouvez voir ici l'évolution du taux de conversion jour après jour pour les deux populations : l'audience activée et le groupe témoin. Ce graphique est cumulatif afin de refléter davantage l'impact en termes d'utilisateurs, d'exposition et de conversions ; cela signifie que les conversions sont ajoutées chaque jour. ### Radar Vous pouvez visualiser directement ici la comparaison entre les deux populations (audience activée et groupe témoin) pour les métriques suivantes : ARPU (Revenu moyen par utilisateur) ; Montant moyen du panier ; Taux de conversion. Cela vous permet d'analyser rapidement quelles métriques ont un fort impact et sont pertinentes pour comparer les populations. ### **Métriques** ![](/files/03f37209757a1252e43fd4f654286fc7332f16cd) Vous avez ici un résumé de toutes les métriques nécessaires pour comparer les populations, comme le nombre d'utilisateurs et le nombre de conversions (nécessaires pour calculer le taux de conversion, par exemple). Le chiffre d'affaires est basé sur total\_final\_conversion\_amount, ce qui signifie qu'il peut évoluer selon les retours de produits, par exemple. ## Puis-je exporter le groupe témoin ? Oui, vous pouvez sélectionner un export (email, S3 ou FTP par exemple), et sélectionner l'univers 'campaign' : ![](/files/aab7c3987a305fa9f68ee3c1ed86b55ad762a6c3) Vous pouvez sélectionner 1 segment ou choisir 'all users' et vous pouvez exporter les variables suivantes : * Groupe témoin : l'utilisateur appartient-il au groupe témoin ? True / False * Exposure count : nombre d'expositions à la campagne pour un utilisateur = nombre de fois qu'un utilisateur est entré dans un segment et a été poussé via le connecteur * First exposure : date de la première exposition * Last exposure : date de la dernière exposition * Stream ID : ID du stream pour lequel le groupe témoin a été activé --- # Agent Instructions: Querying This Documentation If you need additional information that is not directly available in this page, you can query the documentation dynamically by asking a question. Perform an HTTP GET request on the current page URL with the `ask` query parameter: ``` GET https://doc.commandersact.com/fr/fonctionnalites/analyses/campaign-analysis/control-group-beta-release-soon.md?ask= ``` The question should be specific, self-contained, and written in natural language. The response will contain a direct answer to the question and relevant excerpts and sources from the documentation. Use this mechanism when the answer is not explicitly present in the current page, you need clarification or additional context, or you want to retrieve related documentation sections.