Runner AI
DocumentazioneAutomatizza, testa e crea

Misurazione dell'esperimento

Confronta le metriche di controllo e variazione, regola il traffico, rivedi i suggerimenti dell'IA e decidi se applicare le modifiche dell'esperimento.

La misurazione dell'esperimento ti aiuta a confrontare il controllo con la variazione attiva prima di prendere una decisione per il negozio live.

Percorso di accesso

Apri un progetto store → AltroEsperimenti → seleziona un esperimento → Prestazioni.

Prima di iniziare

  • Conferma l'obiettivo dell'esperimento e l'allocazione del traffico corrente.
  • Attendi un campione utile prima di interpretare piccoli cambiamenti percentuali.
  • Rivedi le modifiche della variazione nella scheda Esperimenti prima di considerare Applica modifiche.
  • Chiedi al proprietario dell'area di lavoro prima di un'azione che distribuisce modifiche o interrompe i test live.

Controlli e risultati delle prestazioni

Controllo o sezioneCosa accade o appare
EsperimentiApre messaggi di ciclo, piani, anteprima, modifiche e richieste in sospeso.
PrestazioniApre runtime, dimensione del campione, divisione del traffico, grafico e tabella delle metriche.
Selettore metricaCambia il grafico in una misura supportata come conversione, aggiungi al carrello, checkout, acquisto, valore dell'ordine, ricavi per visitatore, clic su banner, abbandono del carrello o tasso di errore.
Grafico Controllo / VariazioneConfronta la serie registrata per la versione originale e dell'esperimento.
Controllo traffico → AggiornaSalva una nuova allocazione dell'esperimento entro l'intervallo consentito.
Insight IAConsentiApprova il suggerimento di traffico visualizzato.
Insight IAAnnullaIgnora quel suggerimento senza approvarlo.
Chiedi a Runner AIInvia un messaggio all'interno dell'area di lavoro dell'esperimento.
Visualizza pianoApre il piano del ciclo corrente e l'elenco delle cose da fare.

Rivedi la misurazione

  1. Apri Prestazioni.
  2. Conferma runtime, dimensione del campione e divisione del traffico prima di leggere la tendenza.
  3. Seleziona la metrica che corrisponde all'obiettivo dell'esperimento.
  4. Confronta il controllo e la variazione nello stesso periodo.
  5. Controlla le metriche di supporto per errore, abbandono o compromessi di ricavi.
  6. Torna a Esperimenti e rivedi le modifiche esatte che hanno prodotto la variazione.
  7. Leggi qualsiasi richiesta di Insight IA prima di consentire un cambio di traffico.
  8. Scegli di continuare a misurare, regolare il traffico, interrompere o preparare l'applicazione solo dopo aver rivisto sia il comportamento che l'implementazione.

Azioni ad alto impatto

AzioneCosa fa il primo clicCosa significa la conferma
Applica modificheApre Applica modifiche esperimento.La conferma applica le modifiche dell'esperimento al percorso del negozio principale e avvia la distribuzione in produzione. Rivedi prima l'esperimento denominato.
InterrompiApre Interrompi esperimento con avvisi.La conferma termina l'esperimento corrente. Se l'autorizzazione dell'esperimento rimane abilitata, Runner potrebbe avviarne un altro; utilizza le impostazioni del progetto quando intendi disabilitare completamente gli esperimenti.
Traffico AggiornaInvia la nuova allocazione.Il traffico idoneo futuro utilizza la divisione aggiornata dopo il successo.

Risoluzione dei problemi

StatoSignificato e passaggio successivo
Nessun dato del cicloLa misurazione non ha ancora prodotto un risultato del ciclo. Mantieni l'esperimento in esecuzione o ispeziona il suo stato.
Impossibile caricare le metricheRicarica Prestazioni e riprova più tardi; non applicare modifiche da dati mancanti.
Risultato piatto o mistoLe prove disponibili non mostrano un chiaro miglioramento. Continua a misurare o interrompi senza applicare.
Aggiornamento del traffico non riuscitoIl valore corrente non è stato archiviato. Ricarica prima di riprovare un'allocazione valida.
Applicazione non riuscitaNessuna applicazione di produzione riuscita è stata confermata. Conserva l'errore e verifica il negozio live prima di riprovare.

Guide correlate