Méthode d'expérimentation qui teste simultanément plusieurs variables et leurs combinaisons sur une même page. Là où l'A/B test compare deux versions complètes, le test multivarié décompose la page en zones modifiables (titre, image, CTA, mise en page) et teste toutes les combinaisons possibles. Le nombre de variantes croît exponentiellement avec le nombre de variables : 2 variables à 3 options chacune produisent 9 combinaisons. La méthode identifie non seulement la meilleure version de chaque élément mais aussi les interactions entre éléments. Le test multivarié exige un trafic considérablement plus élevé que l'A/B test pour atteindre la significativité statistique.
On utilise des outils comme Google Optimize, VWO ou Adobe Target pour configurer les zones et les variantes. Le test doit tourner assez longtemps pour que chaque combinaison reçoive un volume de trafic suffisant. On limite le nombre de variables à deux ou trois pour garder le test gérable. La méthode full-factorial teste toutes les combinaisons, la méthode fractional-factorial n'en teste qu'un sous-ensemble représentatif. Le test multivarié convient aux pages à fort trafic (page d'accueil, page produit e-commerce, landing page d'acquisition).
Amazon teste régulièrement des combinaisons sur ses pages produit : position du bouton "Ajouter au panier", formulation de la livraison, et affichage du prix. Un test multivarié révèle que la combinaison "bouton orange + mention de livraison gratuite au-dessus du prix" surpasse toutes les autres de 4,3 % en taux de conversion.