Lignes directrices pour arrêter un test A / B (ou MVT) tôt en raison de mesures négatives

1. Comment arrêtez-vous un test AB?
2. Quand devrais-je arrêter de faire des tests AB tôt?
3. Comment pouvez-vous éviter le test de l'effet de nouveauté AB?

Comment arrêtez-vous un test AB?

À côté du test A / B, vous souhaitez modifier ou annuler. Cliquez sur Modifier l'horaire pour modifier le calendrier de test, ou cliquez sur Annuler pour l'annuler.

Quand devrais-je arrêter de faire des tests AB tôt?

Continuez jusqu'à ce que vous atteigniez une signification statistique de 95 à 99%. Assurez-vous que votre taille d'échantillon est suffisamment grande (au moins 1 000 conversions). N'arrêtez pas d'exécuter votre test trop tôt. Visez 1-2 semaines.

Comment pouvez-vous éviter le test de l'effet de nouveauté AB?

La solution évidente pour l'effet de nouveauté serait d'exécuter des tests plus longtemps, donnant aux utilisateurs des tests suffisamment de temps pour se débarrasser de l'effet de nouveauté.