Etapa / 01
Força da afirmação
Cada método é marcado como descritivo, preditivo ou causal. O rótulo acompanha o número em cada relatório, para que uma correlação nunca seja apresentada como efeito.
Plataforma · Medição
Só um método causal pode prometer um resultado.
A Medição decide o que o Signal tem permissão para afirmar. Métodos descritivos dimensionam uma oportunidade, métodos preditivos a projetam, e só métodos causais podem prometer um efeito no P&L. Cada decisão é registrada com o seu grupo de controle antes de começar, para que ninguém escolha o resultado depois.
Etapa / 02
Um contrato antes da decisão
Cada decisão é pré-registrada com uma métrica, pelo menos duas unidades de tratamento e duas de controle, um início, um fim, uma data de leitura e uma métrica de proteção.
Etapa / 03
Leitura por diferença em diferenças
Pelo menos três períodos antes e dois depois, todas as observações usadas, um intervalo de 95% e um teste de tendências paralelas. A janela é fixa, então não pode ser escolhida para favorecer o resultado.
Etapa / 04
Aprendizado que espera aprovação
O que uma leitura ensina vira uma regra candidata. Ela fica inativa até que uma pessoa a aprove, então o sistema só aprende o que as pessoas aceitaram.
Métodos
O método por trás de cada afirmação.
MétodoQuando é usadoForça da afirmação
Diferença em diferenças
Ler uma decisão contra o grupo de controle pré-registrado.
Causal
Controle sintético
Quando não existe um grupo de controle limpo, uma combinação ponderada de unidades parecidas ocupa o lugar dele.
Causal
Simulação de Monte Carlo
Faixas para um cenário antes de ele ser aprovado.
Preditivo
Backtest de previsão
Toda previsão é testada em histórico separado contra uma linha de base ingênua.
Preditivo
Elasticidade-preço
Dimensionar como o volume responde ao preço, por SKU.
Descritivo
Em desenvolvimento: validação científica independente das leituras e reconhecimento contábil do valor capturado. Até lá, uma leitura é reportada como efeito medido pendente de validação, nunca lançada como valor capturado.
Entra uma decisão. Sai um efeito que você consegue defender.
O que lê
- 01A decisão e as suas alternativasNão fazer nada é sempre uma delas
- 02Unidades de tratamento e de controleFixadas antes do início
- 03Períodos antes e depoisPelo menos três e dois
- 04Uma métrica de proteçãoO que não pode piorar
O que devolve
- 01O efeito com intervalo de 95%Ou a declaração clara de que não foi mensurável
- 02Um teste de tendências paralelasSe a comparação se sustenta
- 03Um rótulo de força da afirmaçãoDescritivo, preditivo ou causal
- 04Uma regra candidataPara uma pessoa aprovar
Na prática
Todos os cases →
Onde isso já foi usado.
Dados por toda parte, decisões em lugar nenhum.
R$22–42Mde lucro bruto por ano em escala nacional
R$4,4–8,55Mde caixa único liberado do estoque parado no distribuidor
97%da receita coberta pelo mapeamento reconstruído
60% vs 32%de erro de previsão, a oficial contra uma média ingênua
Mídia decidida com base em 10% das vendas.
232%das vendas creditadas a um único canal pela atribuição antiga
60%da verba de mídia abaixo de ROI 1
+15%de vendas digitais realocando a mesma verba, estimativa do modelo
Meça o que
se moveu
Toda Value Tree define a decisão, a métrica e o grupo de controle antes de qualquer trabalho começar.