Runner AI
DocumentaçãoAutomatizar, testar e criar

Medição de experimento

Compare métricas de controle e variação, ajuste o tráfego, revise sugestões de IA e decida se deve aplicar alterações de experimento.

A medição de experimento ajuda você a comparar o controle com a variação ativa antes de tomar uma decisão de loja ao vivo.

Caminho de entrada

Abra um projeto de loja → MaisExperimentos → selecione um experimento → Desempenho.

Antes de começar

  • Confirme o objetivo do experimento e a alocação de tráfego atual.
  • Aguarde uma amostra útil antes de interpretar pequenas mudanças percentuais.
  • Revise as alterações de variação na aba Experimentos antes de considerar Aplicar alterações.
  • Peça a um proprietário do espaço de trabalho antes de uma ação que implante alterações ou interrompa testes ao vivo.

Controles de desempenho e resultados

Controle ou seçãoO que acontece ou aparece
ExperimentosAbre mensagens de ciclo, planos, visualização, alterações e solicitações pendentes.
DesempenhoAbre tempo de execução, tamanho da amostra, divisão de tráfego, gráfico e tabela de métricas.
Seletor de métricaAltera o gráfico para uma medida suportada, como conversão, adicionar ao carrinho, checkout, compra, valor do pedido, receita por visitante, cliques em banner, abandono de carrinho ou taxa de erro.
Gráfico de controle / VariaçãoCompara a série registrada para a versão original e de experimento.
Controle de tráfego → AtualizarSalva uma nova alocação de experimento dentro do intervalo permitido.
Insight de IAPermitirAprova a sugestão de tráfego exibida.
Insight de IACancelarDescarta essa sugestão sem aprová-la.
Pergunte ao Runner AIEnvia uma mensagem dentro do espaço de trabalho do experimento.
Ver planoAbre o plano de ciclo atual e lista de tarefas.

Revisar medição

  1. Abra Desempenho.
  2. Confirme tempo de execução, tamanho da amostra e divisão de tráfego antes de ler a tendência.
  3. Selecione a métrica que corresponde ao objetivo do experimento.
  4. Compare controle e variação no mesmo período.
  5. Verifique métricas de suporte para erro, abandono ou compensações de receita.
  6. Retorne a Experimentos e revise as alterações exatas que produziram a variação.
  7. Leia qualquer solicitação de Insight de IA antes de permitir uma mudança de tráfego.
  8. Escolha continuar medindo, ajustar tráfego, parar ou preparar para aplicar apenas após revisar comportamento e implementação.

Ações de alto impacto

AçãoO que o primeiro clique fazO que a confirmação significa
Aplicar alteraçõesAbre Aplicar alterações de experimento.Confirmar aplica as alterações do experimento ao caminho principal da loja e inicia a implantação de produção. Revise o experimento nomeado primeiro.
PararAbre Parar experimento com avisos.Confirmar encerra o experimento atual. Se a autorização de experimento permanecer ativada, o Runner pode iniciar outro; use as configurações do projeto quando você pretender desativar completamente os experimentos.
Tráfego AtualizarEnvia a nova alocação.O tráfego elegível futuro usa a divisão atualizada após o sucesso.

Solução de problemas

EstadoSignificado e próxima etapa
Sem dados de cicloA medição ainda não produziu um resultado de ciclo. Mantenha o experimento em execução ou inspecione seu status.
Não é possível carregar métricasRecarregue Desempenho e tente novamente mais tarde; não aplique alterações de dados ausentes.
Resultado plano ou mistoA evidência disponível não mostra uma melhoria clara. Continue medindo ou pare sem aplicar.
Falha na atualização de tráfegoO valor atual não foi armazenado. Recarregue antes de tentar uma alocação válida novamente.
Falha ao aplicarNenhuma aplicação de produção bem-sucedida foi confirmada. Preserve o erro e verifique a loja ao vivo antes de tentar novamente.

Guias relacionados