Lendo resultados de testes A/B
Os resultados ficam na aba Analytics app → Testes A/B. Abra pela plataforma com Ver no Analytics no card do teste (o teste vem pré-selecionado) ou abra o Analytics diretamente e escolha o teste no dropdown.
Use o controle de período e Atualizar nessa página para atualizar o relatório. A aba Testes A/B não usa a barra de filtros compartilhada de página/referrer das outras abas do Analytics.
Cards de resumo
| Card | O que indica |
|---|---|
| Visitantes | Visitantes únicos atribuídos às variantes. |
| Conversões | Visitantes únicos que completaram a meta principal pelo menos uma vez (a taxa de conversão nunca passa de 100%). |
| Taxa de conversão | Conversores únicos ÷ visitantes únicos. Mostra N/A para testes Somente divisão de tráfego. |
| Cliques de checkout | Exibido apenas quando a meta principal é Clique no checkout. |
| Melhor variante | Vencedor declarado quando existe; caso contrário, a variante com maior taxa de conversão (incluindo controle). |
| Saúde do tráfego (SRM) | Se a divisão real de tráfego corresponde aos pesos configurados. |
Tabela de detalhes das variantes
Cada linha de variante mostra visitantes, conversões, taxa de conversão, lift (variação relativa vs controle) e um badge de decisão.
Lift = (CR da variante − CR do controle) / CR do controle. O controle sempre mostra lift 0%.
Badges de decisão (estatísticos)
Enquanto o teste coleta tráfego suficiente para leitura estatística:
- Coletando dados — ainda não há visitantes suficientes (abaixo do limiar de significância). Continue aguardando.
- Liderando — esta variante provavelmente é melhor que o controle.
- Perdendo — esta variante provavelmente é pior que o controle.
- Inconclusivo — dados suficientes, mas sem diferença clara.
Depois de declarar um vencedor
Quando um vencedor foi declarado na plataforma:
- A variante vencedora mostra Vencedor.
- Outras variantes mostram Não selecionado.
- Melhor variante e a área de status também mostram o vencedor declarado (por exemplo Vencedor: Controle).
Você ainda pode abrir testes arquivados e alterar o intervalo de datas para revisar números históricos.
Saúde do tráfego (SRM)
SRM significa sample ratio mismatch (divergência na proporção de amostras). Se você configurou divisão 50/50 mas o tráfego chega 70/30, algo está errado — geralmente roteamento desatualizado ou problema de rastreamento. Quando o SRM mostra aviso, não confie nos números de lift; faça redeploy do teste e verifique se a URL de entrada serve as variantes corretamente.
Gráficos
- Desempenho das variantes — visitantes e conclusões da meta por variante no período selecionado.
- Tendência de tráfego — visitantes únicos diários por variante (uma linha cada).
- Tendência de conversão — conversões diárias por variante (oculto para testes somente divisão de tráfego).
Quando tomar uma decisão
- Aguarde até os badges de decisão saírem de Coletando dados quando quiser uma conclusão estatística.
- Confirme que o SRM está saudável.
- Prefira resultados que cubram pelo menos uma semana completa (comportamento de dias úteis e fim de semana difere).
- Então declare um vencedor ou arquive o teste sem vencedor.
Você ainda pode declarar um vencedor mais cedo se aceitar o risco — o Atomicat registra e exibe essa escolha mesmo que os badges estatísticos ainda estivessem coletando dados.
Perguntas frequentes
Quanto tempo um teste deve rodar?
Até o badge de decisão mostrar liderando ou perdendo com SRM saudável — tipicamente uma a duas semanas para páginas com tráfego estável. Encerrar testes no primeiro dia é o erro mais comum em testes A/B.
Por que Melhor variante é Controle quando a Variante B tem lift negativo?
Melhor variante usa a maior taxa de conversão, incluindo controle — ou o vencedor declarado se você já escolheu um. Lift negativo em um desafiante significa que o controle converte melhor.
Por que visitantes não batem com cliques da plataforma de anúncios?
Plataformas de anúncios contam cliques; o Atomicat conta visitantes únicos que realmente carregaram a página. Bots, scripts bloqueados e conexões que caem causam diferenças.
Posso ver resultados depois que o teste é arquivado?
Sim. Escolha o teste arquivado no dropdown do Analytics e selecione um intervalo de datas que cubra o período em que rodou. Vencedores declarados continuam aparecendo como Vencedor.