AB Testing VS Multi-Variate Testing: Lequel gagne?

  • 22 Mars 2017
  • Aucun commentaire

Vous avez sans doute déjà entendu parler de split-test, cette pratique vous permet de tester aléatoirement différentes pages ou éléments de vos pages.

Un exemple simpliste est de tester la couleur de votre bouton d'ajout au panier, un bouton vert va généralement mieux remplir vos liste d'achat qu'un bouton orange.

Et si vous n'avez encore jamais fait de split-test vous risquez d'être choqué par les écarts de performance que cela pourrait produire, peu importe l'objectif de votre site!

source: https://vwo.com

Si vous éditez un site d'information vous pouvez augmenter

  • le nombre de pages vues par visite
  • la durée de vos visites
  • le nombre de partage

Si vous possédez un ecommerce vous pouvez augmenter

  • le nombre d'ajout au panier
  • le nombre de création de compte
  • réduire le taux d'abandon
  • augmenter le nombre de pages vues

Si vous faîtes du lead vous pouvez augmenter

  • le taux d'inscription de vos formulaire
  • le nombre de lead avec un budget identique

Mais alors quelle différence entre de l'AB Testing et du Multi Variate Testing?

Selon moi l'AB testing est plus fiable que le MVT mais il y a un grand "mais"!

Prenons l'exemple d'une squeeze page classique sur laquelle vous trouver:

  • Un titre "grosse promesse"
  • Une consigne
  • Un bouton qui peut être vert, rouge, bleu, noir
  • Un bouton qui peut contenir plusieurs texte
  • Une image en background

Et si je vous demande ce que vous devez optimiser en premier vous allez sans doute (j'espère) répondre que le premier élément à tester c'est le titre et dans ce cas vous allez avoir raison.

Mais combien de lead allez vous devoir faire pour savoir quel titre est le gagnant parmi les 3 à 10 titres testés?

Pour savoir quand vous devez arrêter le teste et être sûr du gagnant Mehdi a rédigé un super article à propos de la pertinence statistique, mais supposons que vous décidiez de faire de l'AB Testing sur chaque élément, cela veut dire que vous allez tous les tester un par un, exemple:

  • Jour 1: teste du Titre, budget 100€
  • Jour 2: teste de la consigne, budget 100€
  • Jour 3: teste du texte du bouton, budget 100€
  • Jour 4: teste de la couleur du bouton, budget 100€
  • Jour 5: teste de l'image de background, budget 100€

Vous voici avec un budget total de 500€ à dépenser et 5 jours pour savoir quelle version fonctionne le mieux selon l'AB Testing mais le problème c'est que vous pourriez passer à coté d'un "grand combo gagnant" avec ce test séquentiel.

Le multi-Variate Testing

source: vvo.com

Le MVT consiste à tester tous les éléments en même temps en prenant garde d'afficher toutes les combinaisons possibles le même nombre de fois, ce qui peut être assez costaux d'un point de vu développement à gérer, imaginez:

  • 5 titres
  • 5 consignes
  • 5 textes de bouton
  • 3 couleur de bouton
  • 5 images de fond

Soit 5x5x5x3x5 versions de votre LP ce qui vous donne au total 1875 versions à tester!

Comment savoir quelle est la meilleur version si ce budget de 500€ ne vous a fait que 500 leads?!?

Tout l'art est dans la technologie utilisée, vous ne devez pas regarder les conversions pour chacune des 1875 version mais vous baser sur les moyennes statistiques.

Si vous avez fait 500 leads, regardez lequel de vos 5 titres a fait le plus de lead, idem pour les autres éléments. Ce qu'il faut comprendre c'est que:

le multi-variate testing vous permet de faire converger les données gagnantes plus rapidement

Est-ce que le MVT est plus fiable qu'un vrai AB Test séquentiel?

Ce que j'appelle séquentiel c'est étape par étape (un jour après l'autre), la réponse est non selon moi.

Le MVT vous permet d'obtenir une version gagnante fiable plus rapidement qu'un AB test, mais en vous basant uniquement sur des moyennes (mvt) vous pouvez passer à coté de "THE ULTIMATE WIN VERSION" mais ces probabilités sont très minces et surtout, il vous faudrait dépenser une fortune pour la trouver et être sûr que c'est la gagnante.

Conclusion

Optimiser des tunnels de conversion est un véritable métier à lui seul, pour y arriver vous avez besoin de solides compétences en analytique mais surtout de disposer de la bonne technologie et de savoir l'utiliser.

Si vous avez compris ce que le Multi-Variate Testing pourrait vous apporter en terme de chiffres d'affaire sachez que nos clients profitent des dernières technologie d'optimisation et que nous pouvez réaliser cela pour vous.

Pour cela il vous suffit de nous contacter.

Accédez aux 4 études de cas concrets sélectionnés pour vous

Attention, tout le monde n'est pas d'accord à ce sujet, si vous avez le temps ces lectures vous permettront de mieux maîtriser cette passionnant et profitable technique.