Teste A/B: como decidir o que medir antes de testar · Caio Dimas

Notas do episódio

Sua empresa usa dados para tomar decisões ou para confirmar decisões que já foram tomadas?Caio Dimas, especialista em experimentação e testes A/B no Itaú, conversa com Paulo Chiodi sobre o que acontece quando um experimento contraria a liderança e como medir resultado sem ignorar os efeitos colaterais.A conversa passa por uma área de CRO que ficou anos sem rodar testes, uma mudança de mensagem que elevou cliques e frustrou a compra, os limites de conclusões tiradas na Black Friday e a diferença entre pesquisa, teste de usabilidade e teste A/B.Caio também mostra como organizar objetivos, problemas, hipóteses, priorização e resultados em um programa de experimentação. O fechamento traz uma cobrança simples: quantos testes foram feitos importa menos quando ninguém consegue mostrar o valor que eles geraram.Contato de Caio: https://www.linkedin.com/in/paulochiodi/Newsletter Product Gurus: https://productgurus.short.gy/n8RncZ🔗 Aviso importante:Decisões melhores começam com repertório: aprenda com cases reais e profissionais do mercado nos cursos da PM3 e use o cupom PRODUCTGURUS para garantir 10% de desconto: https://productgurus.short.gy/HBiSmtCapítulos00:00 Dados para confirmar opiniões00:11 Quando dados contrariam a decisão01:25 Como provar o valor de testar04:34 O custo de lançar sem medir06:46 Por onde começar um experimento11:50 Onde a estatística complica14:21 Pesquisa, usabilidade e teste A/B16:55 Sucesso e métricas de segurança21:14 Sazonalidade, CRM e Black Friday24:40 Como comunicar resultados negativos28:40 Templates para um programa de experimentação32:32 Como pesquisar concorrentes35:18 Ideias, hipóteses e priorização37:51 O valor do programa39:35 Materiais e contato