Calculadora grátis

Quanto tempo o seu teste A/B deve durar?

Informe sua taxa de conversão, o menor ganho que vale a pena detectar e seu tráfego diário. Você vê quantos visitantes cada variação precisa e quantos dias isso leva, para resultados que você confere todo dia.

%Visitantes que hoje chegam à meta
%Relativo: 10% leva de 5% para 5,5%
Os que entrariam no teste
Variações
Incluindo a original
Confiança
Poder

Seu teste precisa de

25 dias

visitantes por variação
61.330
visitantes no total
122.660

O bastante para detectar uma mudança de 5% para 5,5%.

Planeje 4 semanas inteiras (28 dias), para que todos os dias da semana tenham o mesmo peso.

Rode este teste no LiftCanary

Com poder de 80%, um ganho real deste tamanho é detectado em 8 de cada 10 testes. Calculado com o próprio teste sempre válido do LiftCanary (mSPRT), corrigido pelo número de variações.

Como ler

O que entra nesse número

Confira todo dia, e ele continua válido

Calculadoras clássicas supõem que você olha uma vez só, no fim. Conferido todo dia, um teste clássico aponta um falso vencedor em cerca de 30% das vezes após 40 olhadas. Esta calculadora planeja com a estatística sempre válida do LiftCanary: você pode conferir todo dia e parar antes se o ganho real for maior que o planejado. Em troca, ela pede mais visitantes que uma calculadora clássica, cujo número só vale se você nunca espiar antes do fim.

O ganho que você escolhe é o que mais pesa

Reduza pela metade o menor ganho que vale a pena detectar e você precisa de cerca de quatro vezes mais visitantes. Escolha a menor mudança que você realmente lançaria, não a que você espera.

Cada variação custa tráfego

Cada variação extra precisa dos próprios visitantes, e a confiança é corrigida pelas comparações a mais, para que nenhuma variação vença por sorte. Teste suas duas ou três melhores ideias, não dez.

Longo demais? Mude o teste, não a conta

Teste uma mudança mais ousada, coloque mais tráfego no teste ou meça uma meta mais próxima da mudança, como adicionar ao carrinho em vez de comprar. No LiftCanary, o CUPED usa o que os visitantes recorrentes fizeram antes do teste para reduzir o ruído, e muitas vezes você chega lá antes desta estimativa.

Planeje onde você roda o teste

Quando você cria um experimento no LiftCanary, essa estimativa é feita com o seu tráfego real, e os resultados continuam válidos a cada vez que você olha.