CRO · Multivariate testing

Multivariate testing : mesurer l’effet de plusieurs éléments et de leurs combinaisons.

Un test multivarié modifie simultanément plusieurs éléments d’une page, par exemple le titre, l’image et le bouton, et mesure l’effet de chacun ainsi que de leurs combinaisons. Il demande beaucoup plus de trafic qu’un test A/B. TRACT évalue la faisabilité avant de le proposer.

Prestations
Cadrage · Mise en place · Pilotage
Principe
Plusieurs éléments, toutes leurs combinaisons
Prérequis
Fort trafic sur la page, indicateur fréquent
TRACT

Construire. Mesurer. Accélérer.

Le principe

Cinq notions pour comprendre le test multivarié.

Le vocabulaire est précis. Il détermine le trafic nécessaire et la lecture des résultats.

  • Test A/B/n. Il compare plusieurs variantes d’un même changement, par exemple trois formulations de titre.
  • Test multivarié. Il croise plusieurs éléments, chacun avec ses versions. Trois titres, deux images et deux boutons forment douze combinaisons.
  • Trafic réparti. Chaque combinaison reçoit une part du trafic. Plus il y a de combinaisons, plus il faut de visiteurs pour atteindre une conclusion fiable.
  • Plan factoriel. Le plan complet teste toutes les combinaisons. Le plan fractionnaire en teste une partie et estime le reste sous hypothèses.
  • Lecture des résultats. Le test révèle l’effet propre de chaque élément et les interactions entre éléments, par exemple un titre qui fonctionne avec une image et pas avec une autre.
Choisir

Quand choisir un test multivarié ?

Le test multivarié convient à une page à fort trafic dont plusieurs éléments candidats interagissent, avec un indicateur qui se produit souvent, comme le clic ou l’ajout au panier. Dans les autres cas, une série de tests A/B/n successifs apporte des enseignements plus vite avec moins de trafic.

Avant le lancement, nous calculons le nombre de combinaisons, le trafic nécessaire par combinaison et la durée correspondante. Si cette durée dépasse ce que le calendrier permet, nous proposons un test A/B/n ou un plan fractionnaire.

Aucun seuil de trafic ne s’applique à tous. Le calcul dépend de votre taux de conversion de référence et de l’effet minimal que vous voulez détecter.

Notre méthode

Trois prestations appliquées au multivarié.

  1. Cadrage

    Choix des éléments et de leurs versions, calcul du nombre de combinaisons, du trafic requis et de la durée, décision entre multivarié, A/B/n et plan fractionnaire.

  2. Mise en place

    Développement des versions, recette de chaque combinaison, contrôle de la répartition et de la mesure.

  3. Pilotage

    Suivi du test, lecture des effets propres et des interactions à la date fixée, décision et déploiement de la combinaison retenue.

À connecter

Le multivarié dans un programme CRO.

Il s’appuie sur un audit et se complète par des tests A/B/n.

Expérimentation

A/B testing

Variantes d’un même changement, avec moins de trafic.

Diagnostic

Audit CRO

Choix des éléments à croiser.

Observation

Analyse comportementale

Repérage des éléments qui pèsent sur la conversion.

Questions fréquentes

Questions sur le multivariate testing.

Une autre question ? Écrivez-nous.

Le test A/B compare une ou plusieurs variantes d’un même changement. Le test multivarié modifie plusieurs éléments à la fois et évalue chacun ainsi que leurs combinaisons. Le second exige un trafic nettement plus élevé.

Le besoin augmente avec le nombre de combinaisons. Nous le calculons d’après votre taux de conversion et l’effet à détecter. Si le trafic est insuffisant, nous recommandons des tests A/B/n successifs.

Il révèle les interactions entre éléments. Il consomme davantage de trafic. Le bon format dépend de la page et du volume de visiteurs.

Plusieurs outils de test le proposent, avec des limites variables sur le nombre de combinaisons. Nous vérifions la capacité de l’outil avant de retenir un plan.

Le délai devient souvent trop long. Un plan fractionnaire ou une série de tests A/B/n conviennent mieux dans ce cas.

Sources

Sources officielles.

Un projet à structurer ?

Décrivez vos objectifs, vos outils et vos contraintes : nous revenons vers vous avec une première lecture.