Qu’est-ce que le simulateur de durée ?

Le simulateur de durée vous permet d’ajuster la durée de votre expérience en modifiant le niveau de représentativité statistique. Ce dernier donne la mesure de la fiabilité des résultats de vos expériences.

Des tests plus longs avec plus de visiteurs fournissent des résultats plus fiables. Notre simulateur calcule la durée qu’il faut à un test pour atteindre le niveau de représentativité statistique souhaitée.

Cela signifie qu’un test avec une représentativité statistique de 85% indique que vous pouvez être sûr à 85% que les résultats de votre expérience seront exacts. Inversement, il y a 15% de chances que la conclusion ne soit pas fiable. Un test plus long réduira ce niveau d’incertitude. Convertize vous permet de définir n’importe quelle valeur entre 85% et 99%.

Attention : Le simulateur de durée n’est disponible que lorsque :

1. L’expérience a duré au moins 7 jours (et qu’elle a passé la phase de lancement), et

2. L’expérience n’est pas terminé, et

3. Le niveau de représentativité statistique est supérieur à 88%, et

4. La durée estimée est supérieure à 60 jours.

Cependant, une fois que vous avez personnalisé votre niveau de représentativité statistique, un lien vers le simulateur sera toujours disponible afin que vous puissiez effectuer les changements que vous souhaitez, quelles que soient les conditions.

Qu’est-ce que la représentativité statistique ?

Pour comprendre cette mesure, nous devons aller plus en détails dans la façon dont les statistiques sont utilisées pour tirer des conclusions de vos tests.

Lorsque vous effectuez un test AB, Convertize reçoit les données de tous les visiteurs de votre page. Nous utilisons ensuite cette information pour confirmer ou infirmer l’hypothèse du test sur les futurs visiteurs de votre site.

Imaginons un test avec l’hypothèse suivante : « Avoir un plus gros bouton ‘Acheter maintenant’ augmentera mon taux de conversion ». Nous utilisons donc notre échantillon (tous les visiteurs) pendant la durée du test afin de déterminer si un plus gros bouton ‘Acheter maintenant’ permettrait d’augmenter les conversions.

Parce qu’une hypothèse est une déduction logique, elle est aussi susceptible d’être une erreur. Dans le graphique ci-dessous, la probabilité d’erreur est représentée par les sections grisées. Si vous constatez un résultat inattendu, comme par exemple : un plus gros bouton “Acheter maintenant” entraîne un taux de conversion plus faible, il y a des chances que ce résultat se trouve en dehors du niveau de représentativité statistique de 85%.

Mais si vous augmenter le niveau de représentativité statistique à 95%, norme largement acceptée, la probabilité d’un résultat incorrect est réduite lorsque la durée de l’expérience augmente.

À quel pourcentage dois-je établir ma représentativité statistique ?

Le paramètre par défaut pour chaque expérience est établi à 95%, c’est en effet le niveau de représentativité statistique, et donc de fiabilité que nous recommandons. Cependant, les sites ayant un trafic plus élevé atteindront ce niveau plus rapidement que ceux dont le nombre de visiteurs quotidiens est plus faible.

Par conséquent, la possibilité de réduire ce niveau de fiabilité devient utile pour les situations où vous souhaitez obtenir des résultats plus rapidement.