«Acho que isto vai funcionar» pode ser um ponto de partida. O problema aparece quando essa opinião continua a ser a única explicação depois de gastar tempo, dinheiro e atenção da equipa. Ter executado uma ideia não significa, por si só, que aprendeste alguma coisa sobre ela.
Eu prefiro transformar a convicção numa pergunta que possa ser examinada. Assim, quem propôs a experiência e quem vai avaliar o resultado conseguem discutir o mesmo assunto. A conversa deixa de depender apenas da segurança com que cada pessoa defende a sua preferência.
Começa pela decisão que a experiência deve ajudar a tomar
A experiência deve esclarecer uma decisão identificável, como manter uma mensagem, alterar uma etapa da compra ou dedicar recursos a uma oferta. Escreve o que ainda não sabes e por que razão essa dúvida importa. Uma pergunta demasiado ampla permite interpretar quase qualquer resultado como confirmação da ideia inicial.
Imagina um serviço cuja página recebe visitas, mas gera poucos pedidos adequados. «Precisamos de melhorar o marketing» não define uma experiência. Uma pergunta mais concreta seria perceber se explicar melhor o âmbito do serviço ajuda potenciais clientes a reconhecer quando faz sentido pedir uma conversa.
Neste exemplo hipotético, a hipótese relaciona uma alteração com um comportamento esperado. O texto sobre o âmbito é a mudança; a adequação dos pedidos recebidos é uma das observações relevantes. Mais pedidos podem ser interessantes, mas também importa perceber se correspondem ao serviço que consegues prestar.
O diagnóstico anterior a um plano de marketing ajuda a escolher essa dúvida. Se ainda desconheces a oferta, a capacidade de entrega ou o percurso de compra, podes estar a testar uma explicação para o problema errado.
Escreve também o que farias perante respostas diferentes. Se a mensagem ficar mais clara e os pedidos continuarem inadequados, talvez precises de investigar a origem das visitas. Esta preparação torna o teste mais útil do que uma mudança cujo único desfecho aceitável seria alguém dizer que gostou.
Para preparar o próximo passo, consulta Validação de ideias de negócio.
Regista o ponto de partida e o significado das medidas
Antes de alterar alguma coisa, guarda a situação inicial e define exatamente o que vais contar. Uma medida só permite comparação quando o seu significado se mantém. Datas, origem dos contactos, critérios de adequação e forma de registo ajudam a perceber se estás a observar uma diferença real no mesmo processo.
No exemplo da página de serviços, um pedido enviado pelo formulário é diferente de uma reunião realizada. E uma reunião realizada não demonstra que a pessoa tenha necessidade, condições ou interesse em contratar. Escolhe a etapa que responde à pergunta, mantendo acesso às etapas anteriores para compreender o percurso.
Evita usar apenas totais sem conhecer a oportunidade de gerar esses resultados. Receber mais pedidos num período com muito mais visitas não esclarece, sozinho, se a página melhorou. Também convém registar mudanças na origem dessas visitas, porque públicos diferentes podem chegar com intenções diferentes.
Confirma que o registo funciona antes de começar. Um formulário que deixa de guardar pedidos ou uma definição de contacto adequado que muda a meio podem tornar a comparação pouco útil. Se descobrires uma falha, assinala quando aconteceu e que parte da informação ficou comprometida.
Não precisas de recolher todas as medidas disponíveis. Guarda aquelas que permitem responder à pergunta e identificar explicações alternativas relevantes. Acrescentar números sem saber como entram na decisão torna a revisão mais demorada e facilita escolher, no fim, apenas o indicador que parece favorável.
Escolhe uma comparação que respeite as condições do teste
Comparar exige perceber o que mudou entre as situações observadas e o que ficou semelhante. Alterar mensagem, público, preço e atendimento ao mesmo tempo torna difícil atribuir uma diferença a uma causa específica. Quando várias mudanças forem necessárias, regista-as e limita a conclusão ao conjunto que realmente colocaste à prova.
Uma comparação entre períodos pode ser útil para acompanhar o negócio, mas não isola automaticamente o efeito de uma alteração. A procura, a disponibilidade da equipa e outras ações comerciais também podem variar. A diferença observada precisa de ser lida com essas condições, em vez de receber uma explicação única por conveniência.
Quando faz sentido comparar versões em condições próximas, prepara a distribuição e o acompanhamento antes de começar. Não escolhas a regra de comparação depois de ver qual versão parece ganhar. Se não tens condições para uma avaliação robusta, trata o resultado como uma indicação a investigar.
O orçamento necessário para dar condições a um teste de anúncio faz parte desta preparação. Um teste interrompido antes de chegar a pessoas relevantes pode deixar a pergunta em aberto. Isso não justifica gastar indefinidamente: define os recursos disponíveis e o momento de revisão.
Regista também alterações inevitáveis durante a execução. Se o serviço esgotou capacidade ou a equipa demorou mais a responder, esse contexto interessa à interpretação dos pedidos. A experiência deve ajudar a compreender o negócio real, sem esconder os acontecimentos que tornam a conclusão menos simples.
Separa o que observaste da explicação que estás a considerar
Na revisão, começa pelos acontecimentos registados e só depois propõe explicações. Uma diferença nos resultados não demonstra, por si só, qual foi a sua causa. Distingue evidência favorável, evidência contrária e informação insuficiente, mantendo visíveis as condições que impedem uma resposta mais firme à pergunta original.
Se os pedidos recebidos passaram a descrever melhor a necessidade, podes registar essa mudança com exemplos concretos. A hipótese de que o novo texto ajudou a clarificar o serviço continua a precisar do contexto da comparação. Uma conversa com um potencial cliente pode acrescentar informação, mas não representa automaticamente todos os visitantes.
Quando a informação não chega, escreve «inconclusivo» e explica porquê. Pode ter havido pouca exposição, problemas de registo ou mudanças simultâneas. Estas situações pedem decisões diferentes: melhorar a medição, reformular a pergunta ou avaliar se compensa dedicar mais recursos.
Evita substituir o objetivo inicial por outro apenas porque surgiu um número favorável. Uma descoberta inesperada pode merecer atenção e um teste próprio. Deve ficar registada como nova hipótese, sem ser usada para apresentar como resolvida uma pergunta a que a experiência não respondeu.
Fecha com uma decisão e um registo que outra pessoa compreenda
O fecho deve indicar o que foi testado, o que aconteceu, o que podes concluir e qual será a próxima ação. Guarda também os limites e as dúvidas que continuam abertas. Um registo útil permite que outra pessoa compreenda a decisão sem depender da memória de quem acompanhou a experiência.
Usaria uma ficha curta com pergunta, alteração, período, recursos, observações e decisão. Juntaria ligações para os registos necessários, evitando copiar informação sem contexto para vários documentos. Se alguém discordar da conclusão, deve conseguir identificar a observação ou o pressuposto que está a discutir.
Este cuidado prolonga-se no registo de aprendizagens quando uma campanha termina. A diferença é que a preparação começa antes da execução: define antecipadamente o que queres descobrir, em vez de tentar reconstruir toda a lógica no fim.
Continuar, alterar ou suspender são decisões possíveis. Escolhe a próxima ação de acordo com a informação disponível e com o custo de esclarecer o que falta. O teste cumpriu uma função quando tornou essa escolha mais informada, mesmo que a ideia inicial tenha perdido força.