Question 18: A/B testing Flashcards
Qu’est-ce que le A/B testing?
Comparer 2 versions (ou +) d’une même page web et tester laquelle amène le meilleur résultat (eg. Taux de conversion).
Nommez des avantages/désavantages du A/B testing.
Avantages :
o Simple et rapide à implémenter, peu coûteux
o Fonctionne pour les sites avec peu de trafic
o La meilleure façon de débuter un processus d’expérimentation
Désavantages :
o Limite sur le nombre de versions pouvant être testées (originale + 5 variations pour certains outils)
o Impossible de distinguer les effets des différents changements à l’intérieur d’une même page: changer une chose à la fois
o Limites techniques
Comment développer un plan de test?
o Qui = Définir l’échantillon (trafic) et le groupe contrôle (segmentation!)
o Quoi = Description du changement (variable à tester)
o Quand = Période et durée, afin d’éviter les biais aléatoire (au moins un cycle d’affaires complet, par exemple de 1 à 2 semaines pour du commerce de détail)
o Combien = Objectifs que nous voulons atteindre, par exemple, augmenter le taux de conversion de 1% (Définir un effect minimum (minimum detectable effect - MDE) afin de s’assurer de générer des impacts positifs mesurables
o Pourquoi = Hypothèse à confirmer et le rationnel du test
Prioriser les tests avec VICE framework (/40). Nommez les composantes.
o Rapidité
o Impact
o Confiance
o Facilité
