Runner AI
DocumentatieAutomatiseren, testen en maken

Experimentmeting

Vergelijk metrische gegevens van controle en variatie, pas verkeer aan, controleer AI-suggesties en bepaal of u experimentwijzigingen wilt toepassen.

Experimentmeting helpt u de controle met de actieve variatie te vergelijken voordat u een beslissing voor de live winkel neemt.

Invoerpad

Open een winkelproject → MeerExperimenten → selecteer een experiment → Prestaties.

Voordat u begint

  • Bevestig het experimentdoel en de huidige verkeerstoewijzing.
  • Wacht op een nuttige steekproef voordat u kleine percentagewijzigingen interpreteert.
  • Controleer variatiewijzigingen in het tabblad Experimenten voordat u Wijzigingen toepassen overweegt.
  • Vraag een werkruimteeigenaar voordat u een actie uitvoert die wijzigingen implementeert of live testen stopt.

Prestatiebesturingselementen en resultaten

Besturingselement of sectieWat gebeurt of verschijnt
ExperimentenOpent cyclusmeldingen, plannen, voorbeeld, wijzigingen en hangende verzoeken.
PrestatiesOpent runtime, steekproefgrootte, verkeersplitsing, grafiek en metrische tabel.
Metrische selectorWijzigt de grafiek in een ondersteunde maat zoals conversie, toevoegen aan winkelwagen, afrekenen, aankoop, orderwaarde, opbrengst per bezoeker, banneraanklikken, winkelwagenverlating of foutpercentage.
Controle / VariatiegrafiekVergelijkt de geregistreerde reeks voor de originele en experimentversie.
Verkeersbesturingselement → BijwerkenSlaat een nieuwe experimenttoewijzing op binnen het toegestane bereik.
AI-inzichtToestaanKeurt de weergegeven verkeersuggestie goed.
AI-inzichtAnnulerenVerwerpt die suggestie zonder deze goed te keuren.
Vraag Runner AIVerzendt een bericht in de experimentwerkruimte.
Plan weergevenOpent het huidige cyclusplan en takenlijst.

Meting controleren

  1. Open Prestaties.
  2. Bevestig runtime, steekproefgrootte en verkeersplitsing voordat u de trend leest.
  3. Selecteer de meting die overeenkomt met het experimentdoel.
  4. Vergelijk controle en variatie over dezelfde periode.
  5. Controleer ondersteunende metrische gegevens op fouten, verlating of opbrengstcompromissen.
  6. Ga terug naar Experimenten en controleer de exacte wijzigingen die de variatie hebben veroorzaakt.
  7. Lees een AI-inzicht-verzoek voordat u een verkeerswijziging toestaat.
  8. Kies ervoor om door te gaan met meten, verkeer aan te passen, te stoppen of voor te bereiden om alleen toe te passen na het controleren van zowel gedrag als implementatie.

Acties met grote impact

ActieWat de eerste klik doetWat bevestiging betekent
Wijzigingen toepassenOpent Experimentwijzigingen toepassen.Bevestigen past de experimentwijzigingen toe op het hoofdwinkelpad en start productie-implementatie. Controleer eerst het benoemde experiment.
StoppenOpent Experiment stoppen met waarschuwingen.Bevestigen beëindigt het huidige experiment. Als experimentautorisatie ingeschakeld blijft, kan Runner een ander starten; gebruik projectinstellingen wanneer u experimenten volledig wilt uitschakelen.
Verkeer BijwerkenVerzendt de nieuwe toewijzing.Toekomstig in aanmerking komend verkeer gebruikt de bijgewerkte splitsing na succes.

Probleemoplossing

StatusBetekenis en volgende stap
Geen cyclusgegevensMeting heeft nog geen cyclusresultaat opgeleverd. Houd het experiment actief of inspecteer de status ervan.
Kan metrische gegevens niet ladenLaad Prestaties opnieuw en probeer het later; pas geen wijzigingen toe op basis van ontbrekende gegevens.
Vlak of gemengd resultaatHet beschikbare bewijs toont geen duidelijke verbetering. Ga door met meten of stop zonder toe te passen.
Verkeersupdate misluktDe huidige waarde is niet opgeslagen. Laad opnieuw voordat u een geldige toewijzing opnieuw probeert.
Toepassen misluktEr is geen succesvolle productietoepassing bevestigd. Behoud de fout en controleer de live winkel voordat u het opnieuw probeert.

Gerelateerde handleidingen