Multivariate testing : mesurer l’effet de plusieurs éléments et de leurs combinaisons.
Un test multivarié modifie simultanément plusieurs éléments d’une page, par exemple le titre, l’image et le bouton, et mesure l’effet de chacun ainsi que de leurs combinaisons. Il demande beaucoup plus de trafic qu’un test A/B. TRACT évalue la faisabilité avant de le proposer.
- Prestations
- Cadrage · Mise en place · Pilotage
- Principe
- Plusieurs éléments, toutes leurs combinaisons
- Prérequis
- Fort trafic sur la page, indicateur fréquent
Construire. Mesurer. Accélérer.
Cinq notions pour comprendre le test multivarié.
Le vocabulaire est précis. Il détermine le trafic nécessaire et la lecture des résultats.
- Test A/B/n. Il compare plusieurs variantes d’un même changement, par exemple trois formulations de titre.
- Test multivarié. Il croise plusieurs éléments, chacun avec ses versions. Trois titres, deux images et deux boutons forment douze combinaisons.
- Trafic réparti. Chaque combinaison reçoit une part du trafic. Plus il y a de combinaisons, plus il faut de visiteurs pour atteindre une conclusion fiable.
- Plan factoriel. Le plan complet teste toutes les combinaisons. Le plan fractionnaire en teste une partie et estime le reste sous hypothèses.
- Lecture des résultats. Le test révèle l’effet propre de chaque élément et les interactions entre éléments, par exemple un titre qui fonctionne avec une image et pas avec une autre.
Quand choisir un test multivarié ?
Le test multivarié convient à une page à fort trafic dont plusieurs éléments candidats interagissent, avec un indicateur qui se produit souvent, comme le clic ou l’ajout au panier. Dans les autres cas, une série de tests A/B/n successifs apporte des enseignements plus vite avec moins de trafic.
Avant le lancement, nous calculons le nombre de combinaisons, le trafic nécessaire par combinaison et la durée correspondante. Si cette durée dépasse ce que le calendrier permet, nous proposons un test A/B/n ou un plan fractionnaire.
Aucun seuil de trafic ne s’applique à tous. Le calcul dépend de votre taux de conversion de référence et de l’effet minimal que vous voulez détecter.
Trois prestations appliquées au multivarié.
Cadrage
Choix des éléments et de leurs versions, calcul du nombre de combinaisons, du trafic requis et de la durée, décision entre multivarié, A/B/n et plan fractionnaire.
Mise en place
Développement des versions, recette de chaque combinaison, contrôle de la répartition et de la mesure.
Pilotage
Suivi du test, lecture des effets propres et des interactions à la date fixée, décision et déploiement de la combinaison retenue.
Le multivarié dans un programme CRO.
Il s’appuie sur un audit et se complète par des tests A/B/n.
A/B testing
Variantes d’un même changement, avec moins de trafic.
Analyse comportementale
Repérage des éléments qui pèsent sur la conversion.
Quelle différence entre test A/B et test multivarié ?
Le test A/B compare une ou plusieurs variantes d’un même changement. Le test multivarié modifie plusieurs éléments à la fois et évalue chacun ainsi que leurs combinaisons. Le second exige un trafic nettement plus élevé.
Combien de trafic faut-il ?
Le besoin augmente avec le nombre de combinaisons. Nous le calculons d’après votre taux de conversion et l’effet à détecter. Si le trafic est insuffisant, nous recommandons des tests A/B/n successifs.
Le multivarié donne-t-il de meilleurs résultats ?
Il révèle les interactions entre éléments. Il consomme davantage de trafic. Le bon format dépend de la page et du volume de visiteurs.
Quels outils permettent le multivarié ?
Plusieurs outils de test le proposent, avec des limites variables sur le nombre de combinaisons. Nous vérifions la capacité de l’outil avant de retenir un plan.
Peut-on mener un test multivarié sur une page peu visitée ?
Le délai devient souvent trop long. Un plan fractionnaire ou une série de tests A/B/n conviennent mieux dans ce cas.
Un projet à structurer ?
Décrivez vos objectifs, vos outils et vos contraintes : nous revenons vers vous avec une première lecture.