Experimentos (A/B)
Teste preço, cadência e política de desconto na SUA operação com estatística correta — o que ninguém entrega para PME. O cálculo de PODER diz quantas observações são necessárias para detectar o efeito mínimo que te interessa (com o alfa e o poder escolhidos); o TESTE SEQUENCIAL deixa você acompanha…
O que você encontra nesta tela
Um retrato da tela, lido dela mesma — muda quando a tela muda.
Campos do cadastro
Nome*Como o teste é chamado na operação (ex.: preço do plano básico).
Métrica de desfechoO que decide o vencedor (ex.: conversão da proposta).
Variante A (controle)O que é feito hoje.
Variante B (nova)O que se quer testar.
Efeito mínimoFração com ponto: 0.05 = 5 pontos percentuais. É a menor diferença que vale a pena detectar.
Alfa (significância)O risco aceito de um falso positivo (o usual é 0.05).
PoderA chance de detectar o efeito, se ele existir (o usual é 0.80).
n necessárioCalculado pelo botão "Calcular poder": quantas observações o teste precisa no total.
n atualQuantas observações já entraram.
Sucessos ASucessos observados no controle.
Amostra AObservações do controle.
Sucessos BSucessos observados na variante.
Amostra BObservações da variante.
SituaçãoRascunho → Rodando → Concluído, pelo teste sequencial.
ResultadoO que o teste sequencial disse na última avaliação (efeito, IC e n).
DecisãoA leitura descritiva registrada quando o teste concluiu — a escolha comercial é sua.
Criado emQuando o experimento foi criado.
Comece aqui
O que esta tela responde
Como testar uma mudança na sua operação de forma que o resultado signifique alguma coisa: qual amostra é necessária, e quando parar.
O que é esta tela
Teste preço, cadência e política de desconto na SUA operação com estatística correta — o que ninguém entrega para PME. O cálculo de PODER diz quantas observações são necessárias para detectar o efeito mínimo que te interessa (com o alfa e o poder escolhidos); o TESTE SEQUENCIAL deixa você acompanhar o resultado ao longo do tempo SEM inflar o erro (a fronteira só declara conclusão na hora certa — nada de "espiei e deu significativo"). 🔴 A decisão é descritiva: o efeito com intervalo e n; a escolha comercial é sua.
Um teste A/B correto, sem estatístico
Descreva as duas variantes e a métrica, diga o menor efeito que importa e clique em "Calcular poder": o Tenka diz quantas observações o teste precisa. Depois, "Avaliar (teste sequencial)" — na ficha ou no ⋮ da linha — diz se já dá para concluir.
Como fazer
"n necessário": por que a conta vem antes do teste
Você declara o menor efeito que valeria a pena detectar, e a tela calcula quantos casos são precisos para enxergá-lo. Rodar um teste com amostra insuficiente é gastar semanas para terminar sem resposta — e concluir "não deu diferença" quando o que faltou foi tamanho.
Efeito mínimo, alfa e poder: os três números que definem o teste
Efeito mínimo é a menor diferença que valeria a pena detectar, em fração (0,05 = 5 pontos percentuais) — quanto menor, mais observações o teste exige. Alfa é a chance aceita de declarar efeito onde não há (falso positivo). Poder é a chance de detectar o efeito quando ele existe de verdade. Os três alimentam o cálculo da amostra necessária (n necessário), que a tabela compara com a amostra já coletada (n atual) enquanto o experimento roda.
Lista e ficha no padrão
A tela virou a lista padrão: busca, filtros, visões salvas, colunas, export e lixeira com Desfazer. Clique no registro (ou em Novo) para abrir a ficha, com as abas de detalhe quando houver.
Salvar, navegar e desfazer
Salvar grava sem sair da ficha (Ctrl+S); Salvar e fechar volta para a lista; as setas do cabeçalho passam de um registro a outro. Excluir manda o registro para a lixeira da lista, de onde ele volta com Desfazer.
Regras
Espiar o resultado todo dia e parar no melhor momento é trapaça estatística
Quem olha o placar continuamente e encerra quando está ganhando encontra "efeito" onde não há nenhum — o erro se acumula a cada espiada. O acompanhamento sequencial desta tela é feito para permitir olhar sem inflar esse erro: ele diz quando concluir.
O registro é descritivo
O que fica gravado é o efeito com intervalo e n. A escolha de adotar ou não a mudança é do dono do negócio — a tela não a toma nem a recomenda.
Rascunho, Rodando, Concluído: o ciclo do experimento
O experimento nasce ao ser salvo, com as variantes A (controle) e B (nova) e a métrica de desfecho declaradas. Enquanto roda, a coluna "n atual" mostra a amostra coletada frente ao n necessário. O botão de avaliar aplica o teste sequencial: se a fronteira ainda não foi cruzada, o experimento segue rodando; quando cruza, ele é concluído e o resultado com a decisão aparecem na própria linha da tabela — sem "espiei e deu significativo".
O teste só conclui na hora certa
Olhar o resultado todo dia e parar quando parece bom infla o erro. O teste sequencial corrige isso: enquanto a fronteira não é cruzada, ele diz "ainda coletando" — mesmo que a diferença pareça grande. A decisão registrada é descritiva; a escolha comercial é sua.
Perguntas frequentes
Que pergunta esta tela responde
Quantas observações eu preciso para testar um preço, cadência ou desconto — e quando posso concluir sem me enganar. Preencha efeito mínimo, alfa e poder e clique em "Calcular poder" para ver o n necessário antes de começar; depois acompanhe pelo teste sequencial (botão de avaliar na linha), que só declara conclusão quando a fronteira estatística permite. O resultado registrado é descritivo: efeito com intervalo e n — a decisão comercial continua sua.
Este artigo foi útil?
No mesmo módulo: A empresa no tempo5
Linha do tempoA LINHA DO TEMPO DO GRAFO: escolha um registro (Cliente, Contrato, Projeto, Processo, Pessoa, FCA…) e uma DAT…Motor causalO que teria acontecido SE. O Tenka tem um painel de empresas com ADOÇÃO ESCALONADA (cada uma mudou preço, cad…Previsão reconciliadaA previsão de vendas/receita numa HIERARQUIA (SKU → cliente → região → total) reconciliada para que os níveis…Preço por resultadoTransforma o Certificado de Resultado (D5) numa oferta comercial "% do que recuperou/economizou". A regra de …Replay de decisãoBACKTESTING aplicado ao JULGAMENTO HUMANO: para uma decisão registrada no Conselho Tenka, reconstrói O CENÁRI…
Academia Tenka
Conhecer a AcademiaTrilhas de aprendizado do seu ramo, passo a passo, dentro da plataforma.