Pular para o conteúdo principal

Como ler resultados de teste A/B e declarar um vencedor

Antes de Começar​

  • O teste deve estar em execução (ou arquivado com dados históricos).
  • Visitantes reais precisam ter acessado a URL de entrada — sua visita em janela anônima serve para um primeiro check.

Para o detalhe de cada métrica, veja Lendo resultados de teste A/B.

Passo 1: Abra os resultados​

Na página Testes A/B da plataforma:

  1. Encontre o card do experimento.
  2. Clique em Ver no Analytics.

O Atomicat abre o app Analytics na aba Testes A/B com o experimento pré-selecionado.

Você também pode abrir Analytics → Testes A/B, escolher o experimento no dropdown, definir o período e usar Atualizar.

Passo 2: Leia o resumo​

Confira:

  • Visitantes — visitantes únicos atribuídos às variantes
  • Conversões — visitantes únicos que completaram a meta pelo menos uma vez
  • Taxa de conversão — conversores únicos ÷ visitantes (N/A em somente divisão de tráfego)
  • Melhor variante — vencedor declarado, se houver; senão a maior taxa de conversão (incluindo controle)
  • SRM — se a divisão de tráfego está saudável em relação aos pesos

Passo 3: Compare as variantes​

Na tabela de detalhes:

  • O controle vem rotulado.
  • Lift mostra a variação relativa vs controle.
  • Decisão pode ser coletando dados, liderando, perdendo ou inconclusivo.

Com pouco tráfego, a decisão costuma ficar em Coletando dados.

Passo 4: Declare um vencedor (opcional)​

Quando estiver pronto para publicar uma variante:

  1. Volte para Testes A/B na plataforma.
  2. No teste em execução, clique em Declarar vencedor.
  3. Selecione a variante no popup e confirme.

O Atomicat aplica a página vencedora na URL de entrada (testes baseados em página), grava o vencedor e arquiva o experimento.

Depois disso você deve ver:

  • Badge Vencedor no card da plataforma
  • Vencedor / Não selecionado na coluna Decisão do Analytics
  • O vencedor declarado no status e no card Melhor variante

Passo 5: Arquivar sem vencedor​

Para parar o teste sem aplicar um vencedor, clique em Arquivar. Outros testes ativos em caminhos diferentes do mesmo site continuam rodando.

FAQ​

O que significa um aviso de SRM?

A alocação de tráfego parece desbalanceada em relação aos pesos configurados. Faça Redeploy e confirme que a URL de entrada ainda serve as variantes.

Posso continuar editando um teste em execução?

Somente nome e hipótese. Site, URL de entrada, variantes, divisão de tráfego e meta ficam bloqueados. Arquive e crie um novo teste se precisar de outra configuração.

Por que a Decisão ainda diz Coletando dados?

Ainda não há tráfego suficiente para uma leitura estatística — ou você arquivou sem declarar vencedor. Depois de declarar um vencedor, a Decisão deve mostrar Vencedor / Não selecionado.