Passer au contenu principal
Pour plus d’informations sur les différences entre les tests A/B et multivariate, regardez le cours Get started with web experimentation dans la Kameleoon Academy.

Qu’est-ce qu’un test multivariate ?

Un A/B test classique compare deux versions d’une page. Un test multivariate (MVT) teste simultanément plusieurs variations de plusieurs éléments de page pour trouver la combinaison qui maximise les conversions. Par exemple, supposons que vous souhaitiez tester un bouton d’appel à l’action (CTA) avec deux couleurs (rouge et orange) et deux libellés (Shop et Add to cart). Un seul MVT peut tester et comparer les six combinaisons possibles.

Glossaire MVT

  • Test multivariate : une expérience qui mesure la conversion d’une ou plusieurs combinaisons de plusieurs éléments.
  • Section : un groupe de variations pour un même élément.
  • Variation : un changement suggéré pour un élément donné. Un MVT peut inclure plusieurs variations, regroupées en sections.
  • Combinaison : un ensemble de variations de différentes sections affiché aux visiteurs exposés.

Créer un test multivariate

Pour créer un test multivariate :
  1. Cliquez sur New experiment > In the graphic editor.
  2. Sélectionnez Graphic MVT dans la liste déroulante Experiment type.
  3. Renseignez les informations requises et cliquez sur Continue.

Configurer les sections et les variations

Chaque section regroupe les variations d’un élément. L’exemple suivant teste la couleur et le libellé d’un CTA. Il y a deux couleurs (rouge et orange) et deux libellés : Shop et Add to cart. Pour tester les couleurs, créez une première section (Section A, appelée Color) qui inclut votre version de référence et les variations red et orange.
Une section Color avec la version de référence et les variations red et orange
Pour tester le libellé, créez une deuxième section (Section B, appelée Wording) qui inclut votre version de référence et les variations Shop et Add to cart.
Une section Wording avec la version de référence et les variations Shop et Add to cart
Cliquez sur Create. La version MVT du Graphic editor s’ouvre.

Utiliser l’éditeur MVT

Vous pouvez créer le contenu de vos variations de la même façon que pour une expérience A/B. Cependant, l’éditeur MVT est légèrement différent.

Sections

Cliquez sur une section dans le panneau de gauche pour la sélectionner. Les options suivantes sont disponibles :
  • Cliquez sur l’icône de duplication pour dupliquer la section.
  • Cliquez sur le menu à trois points pour :
    • Renommer la section.
    • Supprimer la section.
Une expérience MVT doit comporter au moins deux sections.

Variations

Les variations de la section sélectionnée sont affichées dans le panneau de gauche. Les options suivantes sont disponibles :
  • Cliquez sur l’icône de duplication pour dupliquer la variation.
  • Cliquez sur le menu à trois points pour :
    • Renommer la variation.
    • Ajouter du code personnalisé (JavaScript ou CSS) à la variation.
    • Prévisualiser la variation dans un nouvel onglet.
    • Rechercher et remplacer des mots sur la page.
    • Supprimer la variation.
Supprimer toutes les variations d’une section supprime également la section elle-même.
Kameleoon recommande de ne pas modifier plus de deux éléments sur votre page (soit un maximum de deux sections), avec trois à quatre variations par élément. Kameleoon associe les variations des différentes sections pour trouver la meilleure combinaison : plus vous créez de sections, plus vous avez besoin de trafic pour obtenir des résultats utilisables et fiables.Pour en savoir plus, consultez l’article sur la signification statistique.
Kameleoon crée automatiquement toutes les combinaisons possibles à partir des variations que vous concevez, en utilisant un plan factoriel complet qui teste chaque combinaison simultanément.

Allouer le trafic

Pour plus d’informations sur l’allocation du trafic dans les expériences MVT, regardez le cours How to finalize your web experiment dans la Kameleoon Academy. Une fois vos variations créées, finalisez votre expérience de la même manière qu’une expérience A/B classique. La seule différence est la distribution du trafic de votre expérience.

Allocation du trafic pour l’expérience

Pour gérer l’allocation du trafic de l’expérience, cliquez et faites glisser le curseur à côté de Exclude a percentage of the exposed visitors jusqu’au pourcentage souhaité.

Allocation du trafic pour les visiteurs exposés

Vous devez choisir l’une des deux façons de distribuer le trafic entre les visiteurs exposés :
  • Par section : vous définissez la part de trafic de chaque variation au sein de chaque section. Kameleoon calcule ensuite le trafic de chaque combinaison à partir des parts des variations qui la composent. Utilisez l’onglet Sections lorsque vous souhaitez pondérer des variations individuelles, par exemple montrer le CTA rouge à plus de visiteurs que le CTA orange.
  • Par combinaison : vous définissez directement la part de trafic de chaque combinaison complète. Utilisez l’onglet Combinations lorsque vous souhaitez un contrôle précis sur des combinaisons spécifiques, par exemple exclure ou favoriser une association particulière.
Les deux onglets sont indépendants : modifier la distribution dans un onglet n’affecte pas l’autre, et un seul s’applique à votre expérience. Kameleoon utilise l’onglet sélectionné au moment où vous cliquez sur Launch. Par défaut, l’onglet Sections est sélectionné.

Distribuer le trafic par section

Cliquez sur Sections pour distribuer le trafic par section. Cochez la case à côté d’une variation pour l’inclure dans votre expérience. Pour modifier l’allocation du trafic d’une variation, effectuez l’une des actions suivantes :
  • Cliquez et faites glisser le curseur de la variation.
  • Saisissez un pourcentage dans le champ de texte.
Cliquez sur le cadenas pour verrouiller l’allocation du trafic d’une variation. Cliquez à nouveau sur le cadenas pour la déverrouiller. Dans l’exemple suivant, 30 % des visiteurs exposés voient un CTA rouge et 40 % voient un CTA orange.
Cliquez sur Allocate equally pour distribuer le trafic équitablement entre les variations. Cliquer sur Allocate equally annule vos modifications.

Distribuer le trafic par combinaison

Cliquez sur Combinations pour distribuer le trafic en fonction des combinaisons que vous avez créées. Supposons que vous souhaitiez tester la couleur et le libellé d’un CTA. Vous auriez deux sections : A (couleur) et B (libellé).
Les combinaisons générées portent les noms suivants :
  • A0B0 Original / Original
  • A0B1 Original / Add to cart
  • A1B0 Red / Original
  • A1B1 Red / Add to cart
  • A2B0 Orange / Original
  • A2B1 Orange / Add to cart
Vous pouvez exclure des combinaisons dans l’onglet Combinations. Par exemple, dans un MVT qui modifie à la fois la couleur d’arrière-plan et la couleur du texte, vous pouvez exclure les combinaisons où les deux couleurs sont identiques. Cochez la case à côté d’une combinaison pour l’inclure dans votre expérience. Pour modifier l’allocation du trafic d’une combinaison, effectuez l’une des actions suivantes :
  • Cliquez et faites glisser le curseur de la combinaison.
  • Saisissez un pourcentage dans le champ de texte.
Cliquez sur le cadenas pour verrouiller l’allocation du trafic d’une combinaison. Cliquez à nouveau sur le cadenas pour la déverrouiller. Cliquez sur Allocate equally pour distribuer le trafic équitablement entre les combinaisons. Cliquer sur Allocate equally annule vos modifications.

Simuler, lancer et analyser votre MVT

Une fois vos variations créées et le trafic distribué, la simulation, le lancement et l’analyse fonctionnent de la même manière que pour une expérience A/B.

Simuler votre MVT

Kameleoon recommande de simuler votre expérience avant sa mise en ligne. Le panneau de simulation génère les combinaisons de votre expérience. Cliquez sur Currently displayed in simulation pour vérifier l’affichage de la combinaison de votre choix. Pour en savoir plus, consultez l’article sur le mode simulation.

Lancer le MVT

Si tout s’affiche correctement et que votre ciblage, vos objectifs et vos outils de reporting sont configurés, vous êtes prêt à lancer. Cliquez sur Launch.

Analyser les résultats

Si vous avez sélectionné Kameleoon comme outil de reporting, les résultats de votre MVT sont transférés vers la page Results des expériences A/B. Chaque combinaison est considérée comme une variation, telle que définie pour les expériences A/B classiques.
Vous pourriez constater une courte latence (jusqu’à 10 minutes) entre le lancement de votre expérience et sa visibilité sur votre site web. Ne vous inquiétez pas si votre expérience n’apparaît pas immédiatement.