Runner AI
DocumentationAutomatiser, tester et créer

Mesure des expériences

Comparez les métriques de contrôle et de variation, ajustez le trafic, examinez les suggestions d'IA et décidez d'appliquer les modifications de l'expérience.

La mesure des expériences vous aide à comparer le contrôle avec la variation active avant de prendre une décision en direct sur le magasin.

Chemin d'accès

Ouvrez un projet de magasin → PlusExpériences → sélectionnez une expérience → Performance.

Avant de commencer

  • Confirmez l'objectif de l'expérience et l'allocation de trafic actuelle.
  • Attendez un échantillon utile avant d'interpréter les petits changements de pourcentage.
  • Examinez les modifications de variation dans l'onglet Expériences avant de considérer Appliquer les modifications.
  • Demandez à un propriétaire de l'espace de travail avant une action qui déploie des modifications ou arrête les tests en direct.

Contrôles et résultats de performance

Contrôle ou sectionCe qui se passe ou apparaît
ExpériencesOuvre les messages de cycle, les plans, l'aperçu, les modifications et les demandes en attente.
PerformanceOuvre le temps d'exécution, la taille de l'échantillon, la répartition du trafic, le graphique et le tableau des métriques.
Sélecteur de métriqueChange le graphique en une mesure prise en charge telle que conversion, ajout au panier, passage à la caisse, achat, valeur de commande, revenu par visiteur, clics sur bannière, abandon de panier ou taux d'erreur.
Graphique Contrôle / VariationCompare la série enregistrée pour la version originale et l'expérience.
Contrôle du trafic → Mettre à jourEnregistre une nouvelle allocation d'expérience dans la plage autorisée.
Aperçu IAAutoriserApprouve la suggestion de trafic affichée.
Aperçu IAAnnulerRejette cette suggestion sans l'approuver.
Demander à Runner AIEnvoie un message dans l'espace de travail de l'expérience.
Afficher le planOuvre le plan de cycle actuel et la liste des tâches.

Examiner la mesure

  1. Ouvrez Performance.
  2. Confirmez le temps d'exécution, la taille de l'échantillon et la répartition du trafic avant de lire la tendance.
  3. Sélectionnez la métrique qui correspond à l'objectif de l'expérience.
  4. Comparez le contrôle et la variation sur la même période.
  5. Vérifiez les métriques de support pour les compromis d'erreur, d'abandon ou de revenu.
  6. Retournez au Expériences et examinez les modifications exactes qui ont produit la variation.
  7. Lisez toute demande Aperçu IA avant d'autoriser un changement de trafic.
  8. Choisissez de continuer à mesurer, d'ajuster le trafic, d'arrêter ou de préparer à appliquer uniquement après avoir examiné le comportement et l'implémentation.

Actions à fort impact

ActionCe que le premier clic faitCe que la confirmation signifie
Appliquer les modificationsOuvre Appliquer les modifications de l'expérience.La confirmation applique les modifications de l'expérience au chemin principal du magasin et démarre le déploiement en production. Examinez d'abord l'expérience nommée.
ArrêterOuvre Arrêter l'expérience avec des avertissements.La confirmation termine l'expérience actuelle. Si l'autorisation d'expérience reste activée, Runner peut en démarrer une autre ; utilisez les paramètres du projet lorsque vous avez l'intention de désactiver complètement les expériences.
Trafic Mettre à jourSoumet la nouvelle allocation.Le trafic éligible futur utilise la répartition mise à jour après succès.

Dépannage

ÉtatSignification et prochaine étape
Pas de données de cycleLa mesure n'a pas encore produit de résultat de cycle. Gardez l'expérience en cours ou inspectez son statut.
Impossible de charger les métriquesRechargez Performance et réessayez plus tard ; n'appliquez pas les modifications à partir de données manquantes.
Résultat plat ou mixteLes preuves disponibles ne montrent pas une amélioration claire. Continuez à mesurer ou arrêtez sans appliquer.
Échec de la mise à jour du traficLa valeur actuelle n'a pas été stockée. Rechargez avant de réessayer une allocation valide.
Échec de l'applicationAucune application de production réussie n'a été confirmée. Conservez l'erreur et vérifiez le magasin en direct avant de réessayer.

Guides connexes