1. Blog
  2. Métricas e finanças de marketing

Quantas visitas preciso para um teste A/B? Calcule amostra e duração

Estime visitantes por versão e dias de coleta com a taxa de conversão atual, o menor efeito que vale detectar e o tráfego elegível do seu site.

Dois painéis de teste em paralelo mostram distribuições diferentes.
Ilustração editorial criada para este guia.

Compartilhar este artigo

Em poucas palavras

O número de visitantes em um teste A/B depende de quão comum é a conversão, de quanto você precisa detectar e do nível de incerteza aceito. Antes de publicar duas versões, estime a amostra, planeje a janela e anote quando a equipe poderá olhar o resultado final.

  • Defina um evento e conte visitantes elegíveis.
  • Use pontos percentuais para informar o efeito.
  • Considere ciclos do negócio e atraso de conversão.

Escolha o evento e a unidade que vai comparar

Um teste A/B separa pessoas elegíveis em grupos e mostra a cada grupo uma versão. Para estimar a amostra, escolha uma métrica que cada visitante possa atingir ou não. Pode ser concluir uma compra, enviar um formulário válido ou ativar uma conta em um prazo fixo. Identifique em que tela a pessoa é sorteada e como o grupo será mantido nas visitas futuras. Quando a mesma pessoa visita a página três vezes, ela não representa três unidades independentes.

O evento precisa servir à decisão. Para uma página de orçamento, contar clique no botão pode ajudar a diagnosticar navegação, enquanto formulário validado é uma medida mais próxima do que gera trabalho para a equipe. Registre ações intermediárias, mas escolha uma métrica principal antes do início para que a conclusão não dependa de procurar a diferença mais chamativa.

Meça a taxa atual e o menor ganho relevante

Use um período que represente o tráfego exposto à versão atual. Incorpore sazonalidade e mudanças no mix de canais na escolha do período. Se 300 de 10.000 visitantes elegíveis concluíram a ação, a taxa atual é 3%. Se a menor mudança que valeria implementar é ir a 4%, informe aumento de um ponto percentual. O ganho relativo nesse exemplo é de cerca de 33%, outra forma de expressar a mesma diferença.

Quanto menor o efeito que você tenta detectar, mais observações geralmente são necessárias. Uma equipe pode desejar descobrir uma melhora de 3% para 3,1%, mas deve enfrentar o custo e a validade de manter o teste ativo pelo tempo que isso exigiria. Se a operação não consegue sustentar a coleta, teste uma mudança de efeito plausivelmente maior ou use outro método para investigar o problema.

Preencha a calculadora e confira as premissas

Informe conversão atual, aumento em pontos percentuais, visitantes únicos elegíveis por dia nas duas versões somadas, confiança e poder estatístico. A ferramenta estima a quantidade por grupo para uma divisão equilibrada e usa uma aproximação normal para comparar duas proporções. O teste é bilateral, portanto o procedimento de análise pode detectar diferença em qualquer direção. A amostra é planejada para o aumento informado.

Confiança define o limite de falso positivo do procedimento quando as hipóteses e condições forem atendidas; poder estima a chance de detectar o efeito adotado caso ele exista. Poder de 80% não significa que o teste tem 80% de chance de dar o resultado que a equipe deseja. Se você usa vários grupos, sorteia por cidade ou pretende encerrar assim que a página aparentar ganhar, precisa de um método compatível com esse desenho.

Experimente aqui, com seus dados.

Use a ferramenta sem sair da leitura. Suas respostas são processadas no navegador e não preenchem o formulário de contato.

Abrir Calculadora de amostra e duração para teste A/B
Usar a ferramenta em uma página completa

Acrescente ciclos e janela de conversão ao calendário

Divida o total estimado pelo tráfego diário para obter os dias mínimos de coleta em volume. Esse resultado ainda precisa passar pelo calendário. Um fim de semana pode mudar a composição do público e uma venda longa pode levar dias para aparecer depois do clique. Planeje cobrir ciclos relevantes e mantenha o mesmo prazo de observação para os dois grupos.

Combine antes o que acontece se o tráfego cair pela metade ou a medição falhar. Exemplos de situações que pedem investigação são o desequilíbrio nas quantidades sorteadas, uma versão que não carrega e um feriado que reduz muito o tráfego. Evite estender o teste só porque o resultado ainda não favorece uma das versões. Documente decisões de coleta para poder interpretar o que viu depois.

Leia a diferença junto com a incerteza

A calculadora resolve a parte de planejamento. Ao analisar a execução, revise a qualidade do sorteio e compare as taxas com um método apropriado ao teste. Observe o intervalo estimado para a diferença e o efeito de negócio. Uma diferença significativa pode ser pequena demais para pagar a implantação. Uma diferença inconclusiva também pode incluir efeitos positivos e negativos relevantes.

Feche com um registro que mostre a hipótese, o período, a amostra, os resultados e o próximo passo. Se trocar a página exigir mais manutenção ou mudar a qualidade dos contatos, inclua essas consequências. Aprender que um ajuste não produziu evidência suficiente também ajuda a escolher a próxima hipótese.

Exemplo hipotético

Uma loja planeja mudar o checkout

A loja recebe cerca de 1.000 visitantes elegíveis por dia. A conversão histórica é 3% e a mudança precisa alcançar 4% para compensar o trabalho. Com 95% de confiança e 80% de poder, a estimativa fica perto de 5.300 visitantes por versão, ou cerca de 11 dias de coleta. A equipe escolhe uma janela de duas semanas para cobrir dias úteis e fins de semana e aguarda as conversões tardias antes de analisar. A projeção depende do tráfego se manter próximo ao informado.

Planejamento de um teste A/B

Deslize o infográfico para ver todos os detalhes ou abra a versão em texto abaixo.

Ler o infográfico em texto
  • Evento: Defina quem converte.
  • Efeito: Escolha a menor diferença útil.
  • Amostra: Estime volume com as premissas.
  • Janela: Planeje coleta e atraso de conversão.
Baixar o infográfico em SVG

Checklist de aplicação

  • Defina grupo, evento e prazo.
  • Calcule taxa atual e diferença mínima.
  • Estime amostra e revise o calendário.
  • Escreva a regra de encerramento e a análise prevista.

Dúvidas frequentes

Posso usar sessões como unidade?

Só use sessões quando o desenho e a análise justificarem essa unidade. Se a mesma pessoa pode voltar ou ver as duas versões, visitantes identificados de forma adequada costumam ser a unidade mais coerente.

A calculadora declara uma versão vencedora?

Ela estima a amostra com suas premissas. A análise das taxas realizadas, dos intervalos e da qualidade da execução acontece depois.

Mais confiança sempre ajuda?

Um limiar mais rigoroso reduz a taxa de falso positivo prevista e aumenta a amostra necessária, mantidas as outras condições. Escolha o equilíbrio com base no custo de errar e na viabilidade do teste.

Fontes e aprofundamento

As referências apoiam conceitos e detalhes técnicos. O roteiro de aplicação e os exemplos são uma síntese editorial; consulte o contexto e os limites de cada fonte.

Como este conteúdo é preparado

Continue a leitura

Explore a Exponency

O que você quer resolver?

Escolha um caminho ou procure um assunto.