Blog

Blog Donnu A/B

Guias completos e honestos sobre CRO, teste A/B e experimentação. As matérias mais completas da internet, sem enrolação. (página 5 de 24)

Estatística

Modelagem de Uplift: do efeito médio à política

Modelagem de uplift estima o efeito por usuário e transforma isso em quem tratar. Meta-aprendizes, curva de ganho e a validação que não existe.

Estatística

Análise de Mediação: por onde o efeito do teste A/B passou

Análise de mediação separa o efeito direto do indireto. A conta, a armadilha de segmentar depois do sorteio e a premissa que ninguém testa.

Estatística

Dados Faltantes em Teste A/B: MCAR, MAR e imputação

A linha que não chegou muda o resultado. Como classificar dados faltantes, por que casos completos exageram o efeito e o que a imputação conserta.

Estatística

Desenho de Encorajamento: sortear o convite, medir o uso

Quando o recurso não pode ser desligado, sorteia-se o convite. O que o desenho de encorajamento mede, quanto ele custa em amostra e onde ele quebra.

Estatística

Confundidor Não Medido: quanto ele teria que ser forte

Toda leitura observacional depende do que você não mediu. A análise de sensibilidade vira número: quanto o confundidor não medido teria que ser forte.

Estatística

Escore de Propensão: montar o par que o sorteio não montou

O escore de propensão colapsa dezenas de covariáveis num número só para parear tratado e controle. O que ele conserta, o que não conserta e onde piora.

Estatística

Série Temporal Interrompida: ler o efeito de um lançamento

Série temporal interrompida: a regressão segmentada separa degrau, tendência e sazonalidade do que já estava crescendo antes do lançamento.

Estatística

Controle Sintético: o grupo de controle que não existiu

Quando só um mercado recebeu a mudança, o controle sintético monta um controle pesando vários mercados. Como calcular, como validar e onde ele falha.

Estatística

Diferenças em Diferenças em Teste A/B: medir sem sorteio

Sem sortear usuário, diferenças em diferenças compara a variação do tratado com a do controle. Como fazer a conta e por que o erro-padrão engana.