Descrição do projeto
TraduzidoTemos um produto web em crescimento e queremos parar de adivinhar quais mudanças realmente impactam as métricas. O objetivo é uma plataforma de experimentação completa que permita que as equipes de produto e marketing realizem testes controlados sem reescritas de backend a cada vez. Um experimento é definido escolhendo um público-alvo, descrevendo duas ou mais variantes, atribuindo distribuição de tráfego (por exemplo, 50/50 ou ponderada) e selecionando um ou mais objetivos de conversão: inscrição, clique, compra concluída. Após o lançamento, o sistema deve manter cada visitante na mesma variante em sessões diferentes para que os resultados permaneçam limpos.
O coração é o motor de estatísticas e o painel de resultados. Para cada experimento ativo, você precisa ver visitantes, conversões e taxa de conversão por variante, além do cálculo correto de significância para entender quando os resultados são confiáveis e quando é apenas ruído. Pedimos intervalos de confiança, aumento em relação ao controle e um indicador claro de se o teste alcançou significância e reuniu tamanho de amostra suficiente. Também queremos proteção contra conclusões prematuras: o painel deve nos informar quando é cedo demais para decidir. Esta é uma ferramenta de experimentação, não um interruptor de recurso e não análises web padrão — o foco está em testes controlados e matemática de significância honesta.
Para marcação de site, precisamos de um SDK leve, preferencialmente JavaScript para o navegador, além de uma versão simples do servidor que receba a variante atribuída e envie eventos de conversão de volta. Deve ser rápido, armazenar em cache as atribuições e degradar graciosamente para que um experimento quebrado nunca quebre a página. O resultado deve estar pronto para produção e documentado para que nossa equipe possa realizar experimentos de forma independente após a entrega.
— Construtor de experimentos: variantes, divisão de tráfego ponderada, segmentação de público, múltiplos objetivos
— Atribuição estável por visitante, consistente em sessões e idealmente em dispositivos
— Motor de estatísticas: taxas de conversão, intervalos de confiança, aumento, verificação de significância e tamanho da amostra
— Painel de resultados com métricas de variante e recomendação clara para continuar ou parar
— SDK do cliente e do servidor para atribuição de variante e rastreamento de eventos com fallback gracioso
— Documentação e entrega rápida para que a equipe realize experimentos de forma independente
O coração é o motor de estatísticas e o painel de resultados. Para cada experimento ativo, você precisa ver visitantes, conversões e taxa de conversão por variante, além do cálculo correto de significância para entender quando os resultados são confiáveis e quando é apenas ruído. Pedimos intervalos de confiança, aumento em relação ao controle e um indicador claro de se o teste alcançou significância e reuniu tamanho de amostra suficiente. Também queremos proteção contra conclusões prematuras: o painel deve nos informar quando é cedo demais para decidir. Esta é uma ferramenta de experimentação, não um interruptor de recurso e não análises web padrão — o foco está em testes controlados e matemática de significância honesta.
Para marcação de site, precisamos de um SDK leve, preferencialmente JavaScript para o navegador, além de uma versão simples do servidor que receba a variante atribuída e envie eventos de conversão de volta. Deve ser rápido, armazenar em cache as atribuições e degradar graciosamente para que um experimento quebrado nunca quebre a página. O resultado deve estar pronto para produção e documentado para que nossa equipe possa realizar experimentos de forma independente após a entrega.
— Construtor de experimentos: variantes, divisão de tráfego ponderada, segmentação de público, múltiplos objetivos
— Atribuição estável por visitante, consistente em sessões e idealmente em dispositivos
— Motor de estatísticas: taxas de conversão, intervalos de confiança, aumento, verificação de significância e tamanho da amostra
— Painel de resultados com métricas de variante e recomendação clara para continuar ou parar
— SDK do cliente e do servidor para atribuição de variante e rastreamento de eventos com fallback gracioso
— Documentação e entrega rápida para que a equipe realize experimentos de forma independente
Desenvolvimento de software Dinheiro, Transferência bancária
