DokumentationAutomatisieren, testen und erstellen
Experimentmessung
Vergleichen Sie Kontroll- und Variationsmetriken, passen Sie den Traffic an, überprüfen Sie KI-Vorschläge und entscheiden Sie, ob Sie Experimentänderungen anwenden möchten.
Die Experimentmessung hilft Ihnen, die Kontrolle mit der aktiven Variation zu vergleichen, bevor Sie eine Entscheidung für den Live-Shop treffen.
Einstiegspfad
Öffnen Sie ein Store-Projekt → Mehr → Experimente → wählen Sie ein Experiment → Leistung.
Bevor Sie beginnen
- Bestätigen Sie das Experimentziel und die aktuelle Traffic-Zuweisung.
- Warten Sie auf eine aussagekräftige Stichprobe, bevor Sie kleine prozentuale Änderungen interpretieren.
- Überprüfen Sie Variationsänderungen auf der Registerkarte Experimente, bevor Sie Änderungen anwenden in Betracht ziehen.
- Fragen Sie einen Workspace-Besitzer, bevor Sie eine Aktion durchführen, die Änderungen bereitstellt oder Live-Tests stoppt.
Leistungssteuerelemente und Ergebnisse
| Steuerelement oder Abschnitt | Was passiert oder wird angezeigt |
|---|---|
| Experimente | Öffnet Zyklus-Nachrichten, Pläne, Vorschau, Änderungen und ausstehende Anfragen. |
| Leistung | Öffnet Laufzeit, Stichprobengröße, Traffic-Aufteilung, Diagramm und Metriktabelle. |
| Metrik-Selector | Ändert das Diagramm zu einem unterstützten Maß wie Konversion, Zum Warenkorb hinzufügen, Kasse, Kauf, Bestellwert, Umsatz pro Besucher, Banner-Klicks, Warenkorbabbruch oder Fehlerquote. |
| Kontroll-/Variationsdiagramm | Vergleicht die aufgezeichneten Serien für die Original- und Experimentversion. |
| Traffic-Steuerelement → Aktualisieren | Speichert eine neue Experimentzuweisung innerhalb des zulässigen Bereichs. |
| KI-Einblick → Zulassen | Genehmigt den angezeigten Traffic-Vorschlag. |
| KI-Einblick → Abbrechen | Verwirft diesen Vorschlag, ohne ihn zu genehmigen. |
| Runner AI fragen | Sendet eine Nachricht im Experiment-Workspace. |
| Plan anzeigen | Öffnet den aktuellen Zyklus-Plan und die To-Do-Liste. |
Messung überprüfen
- Öffnen Sie Leistung.
- Bestätigen Sie Laufzeit, Stichprobengröße und Traffic-Aufteilung, bevor Sie den Trend lesen.
- Wählen Sie die Metrik aus, die dem Experimentziel entspricht.
- Vergleichen Sie Kontrolle und Variation über denselben Zeitraum.
- Überprüfen Sie unterstützende Metriken auf Fehler-, Abbruch- oder Umsatzkompromisse.
- Kehren Sie zur Registerkarte Experimente zurück und überprüfen Sie die genauen Änderungen, die die Variation erzeugt haben.
- Lesen Sie alle KI-Einblick-Anfragen, bevor Sie eine Traffic-Änderung zulassen.
- Wählen Sie, ob Sie weiter messen, den Traffic anpassen, stoppen oder nur nach Überprüfung von Verhalten und Implementierung anwenden möchten.
Hochauswirkungsmaßnahmen
| Aktion | Was der erste Klick bewirkt | Was Bestätigung bedeutet |
|---|---|---|
| Änderungen anwenden | Öffnet Experimentänderungen anwenden. | Die Bestätigung wendet die Experimentänderungen auf den Haupt-Store-Pfad an und startet die Produktionsbereitstellung. Überprüfen Sie zuerst das benannte Experiment. |
| Beenden | Öffnet Experiment beenden mit Warnungen. | Die Bestätigung beendet das aktuelle Experiment. Wenn die Experiment-Autorisierung aktiviert bleibt, kann Runner ein anderes starten; verwenden Sie Projekteinstellungen, wenn Sie Experimente vollständig deaktivieren möchten. |
| Traffic Aktualisieren | Sendet die neue Zuweisung. | Zukünftiger berechtigter Traffic verwendet die aktualisierte Aufteilung nach erfolgreicher Durchführung. |
Fehlerbehebung
| Zustand | Bedeutung und nächster Schritt |
|---|---|
| Keine Zyklus-Daten | Die Messung hat noch kein Zyklus-Ergebnis erzeugt. Halten Sie das Experiment laufen oder überprüfen Sie seinen Status. |
| Metriken können nicht geladen werden | Laden Sie Leistung neu und versuchen Sie es später erneut; wenden Sie keine Änderungen aus fehlenden Daten an. |
| Flaches oder gemischtes Ergebnis | Die verfügbaren Beweise zeigen keine klare Verbesserung. Fahren Sie mit der Messung fort oder stoppen Sie ohne Anwendung. |
| Traffic-Update fehlgeschlagen | Der aktuelle Wert wurde nicht gespeichert. Laden Sie neu, bevor Sie eine gültige Zuweisung erneut versuchen. |
| Anwendung fehlgeschlagen | Es wurde keine erfolgreiche Produktionsanwendung bestätigt. Bewahren Sie den Fehler auf und überprüfen Sie den Live-Shop, bevor Sie es erneut versuchen. |