Como medir o impacto de alterações de marketing e provar que uma alteração resultou

O que significa medir o impacto de uma alteração de marketing?

Medir o impacto de uma alteração é estimar a diferença entre o que aconteceu depois dela e o que teria acontecido sem ela. Esse segundo número nunca aparece no relatório, por isso cada método é uma forma de construir uma estimativa credível desse valor.

Há três níveis de evidência, e convém saber qual está a usar antes de apresentar um resultado:

A maioria das equipas fica pelo primeiro e depois discute na reunião seguinte. O resto do artigo mostra como subir de nível com os dados que já tem.

Como montar uma comparação de antes e depois que resista a perguntas?

Use períodos do mesmo tamanho, retire os dias instáveis logo a seguir à alteração e espere que as conversões cheguem. Um período mal escolhido pode, por si só, criar ou esconder um efeito de 20%.

1. Registe a hora exata da alteração. Data, hora e fuso horário. Uma estratégia de licitação trocada às 18h00 de uma terça-feira torna essa terça um dia misto; retire-o dos dois períodos.
2. Use períodos iguais com os mesmos dias da semana. Compare 14 dias com 14 dias, ou 4 semanas completas com 4 semanas completas, para comparar segundas com segundas.
3. Ignore a fase de aprendizagem. A licitação automática precisa de tempo para estabilizar. Nas suas próprias experiências, a Google descarta os primeiros 7 dias de dados e descreve um período de 7 a 14 dias em que os dados podem oscilar. Aplique a mesma lógica às análises manuais.
4. Espere pelo atraso de conversão. O Google Ads pode registar conversões até 90 dias após o clique, consoante a janela de conversão. Os dias recentes parecem piores do que vão ficar, porque parte de quem clicou ainda não converteu. Consulte o segmento Conversões > Dias até a conversão para ver quanto tempo os seus clientes costumam demorar.
5. Escreva primeiro o efeito esperado. Defina que métrica deve mudar, em que sentido e aproximadamente quanto, antes de olhar para o resultado. Assim evita escolher a métrica que por acaso ficou bem.

Exemplo: uma equipa troca a landing page de uma campanha de pesquisa numa quarta-feira às 10h00. Compara os 28 dias anteriores com os dias 8 a 35 após a troca e só lê as conversões quando os cliques já são mais antigos do que o tempo habitual até à conversão.

Como usar um grupo de controlo quando não é possível testar?

Escolha algo que não alterou e que costuma mexer em conjunto com o que alterou, e desconte esse movimento. O que sobra é uma estimativa muito melhor do impacto.

Controlos úteis em marketing:

• Uma campanha ou grupo de anúncios semelhante que ficou intacto
• Uma região, distrito ou loja onde a alteração não foi aplicada
• Uma linha de produto ou serviço com a mesma sazonalidade
• As mesmas semanas do ano anterior, em negócios sazonais

Exemplo com números ilustrativos:

Só com antes e depois, a nova página teria aumentado a taxa de conversão em 15%. O controlo mostra que o mercado fez subir tudo cerca de 8%, pelo que a página explica perto dos 7% restantes. É esta a ideia de uma leitura de diferença nas diferenças.

Para uma versão mais formal, o pacote de código aberto CausalImpact, da Google, constrói um cenário contrafactual a partir de séries de controlo. A documentação é clara quanto às condições: os controlos não podem ser afetados pela intervenção e a relação com a sua métrica tem de se manter estável depois da alteração. Se isso falhar, o modelo pode sobrestimar ou subestimar o efeito.

Quando faz sentido realizar uma experiência a sério?

Faça uma experiência quando a decisão é cara ou difícil de reverter, como uma nova estratégia de licitação, a correspondência ampla ou uma nova landing page na maior campanha. Ter as duas versões em simultâneo retira a sazonalidade e o mercado da comparação.

No Google Ads, as experiências personalizadas estão disponíveis para campanhas de pesquisa, display, vídeo e hotéis, mas não para campanhas de apps ou Shopping. Encontram-se em Campanhas > Experimentos (nome que a ajuda da Google mostra). Pontos da ajuda que contam para uma leitura limpa:

• A Google recomenda dividir o orçamento a 50% para a melhor comparação.
• A divisão Com base em cookies mostra só uma versão a cada utilizador; a divisão Com base em pesquisa pode chegar mais depressa à significância, mas o utilizador pode ver as duas.
• Mantenha a experiência pelo menos 4 a 6 semanas, mais se o atraso de conversão for longo.
• Não tenha várias experiências ao mesmo tempo e evite alterar orçamentos ou objetivos com frequência durante o teste.
• A divisão de tráfego não pode ser alterada depois de a experiência começar.

Se o resultado for inconclusivo, isso também é um resultado: a alteração não produziu um efeito suficientemente grande para ser detetado com o seu volume. A própria Google sugere usar campanhas com mais volume e prolongar o teste.

Porque é que alterações sobrepostas estragam a medição?

Se duas alterações caem no mesmo período, não é possível separar o efeito de cada uma, por melhor que seja o método. A sobreposição é o motivo mais comum para uma medição falhar.

Antes de ler qualquer resultado, isole a causa:

1. Coloque todas as alterações numa única cronologia. Inclua os dias antes e depois: as edições da equipa no Google Ads, no Meta Ads e noutras plataformas, as recomendações aplicadas automaticamente, ajustes de Smart Bidding ou Advantage+, publicações no site, alterações de etiquetas e de consentimento, alterações no CRM ou na distribuição de contactos, preços e eventos externos.
2. Exclua primeiro o tracking. Uma etiqueta avariada, uma conversão duplicada ou um novo banner de cookies podem parecer uma mudança de desempenho. Confirme se as conversões na plataforma de anúncios, no GA4 e no CRM continuam a coincidir.
3. Teste uma hipótese de cada vez. Se a cronologia mostrar uma segunda alteração no período, encurte o período para a evitar ou apresente as duas em conjunto, dizendo-o claramente.

O histórico de alterações do Google Ads cobre as edições da conta, mas não o site, o tracking nem o CRM. As oscilações sazonais são outra sobreposição; veja como distinguir a sazonalidade das suas alterações.

Como registar uma alteração para a conseguir medir mais tarde?

Registe a alteração no momento em que a faz, com detalhe suficiente para que alguém a meça um mês depois sem ter de lhe perguntar. A memória e as conversas no chat não sobrevivem ao relatório seguinte.

Registe pelo menos:

• Data, hora e fuso horário
• Responsável e cliente ou projeto
• O que mudou, no formato antes → depois (por exemplo, CPA alvo 40 → 32)
• Âmbito: conta, campanhas, páginas ou regiões afetadas
• Hipótese e efeito esperado
• Métrica, período e controlo a usar, e uma data de revisão

O GA4 permite acrescentar notas aos relatórios: clique com o botão direito num ponto de um gráfico de linhas, escolha Adicionar anotação e depois Criar anotação. O título tem até 60 caracteres, a descrição até 150, e cada propriedade aceita até 1000 anotações; é necessária a função de Analista ou superior para as criar. Serve como marcador, não como o registo completo acima, e só cobre o que vê no GA4. Consulte o guia de anotações do GA4.

Um registo de alterações de marketing partilhado mantém todas as alterações, de todas as plataformas, numa única cronologia por cliente. O Changeline faz isto hoje com registos manuais, responsáveis, etiquetas e motivos; pode começar um registo de alterações gratuito enquanto está em acesso antecipado.

Como apresentar ao cliente o impacto de uma alteração?

Apresente o veredicto, o nível de evidência e a decisão em cinco linhas. O cliente confia mais num método claro do que num número grande.

1. Alteração: o que mudou, quando e quem a fez.
2. Períodos: as datas de antes e depois, sem a fase de aprendizagem nem o atraso de conversão.
3. Controlo: com o que comparou, ou a indicação de que não houve controlo.
4. Resultado: o efeito estimado e o nível de evidência (antes e depois, controlo, experiência).
5. Decisão: manter, reverter ou prolongar o teste.

Quando o resultado for misto, diga-o. «Sem efeito mensurável após 6 semanas» é uma conclusão útil que poupa orçamento. Se a métrica desceu em vez de subir, os passos da análise de causa raiz em marketing e o guia sobre como explicar uma quebra de conversões ao cliente ajudam a estruturar a conversa.