Registro de experimentos de marketing: como documentar testes e confiar no resultado

Equipe Changeline · Publicado em · 9 min de leitura

Um registro de experimentos de marketing reúne todos os testes do time: hipótese, mudança exata, método, datas, métrica de sucesso, resultado e decisão. Mantenha-o ao lado do seu log de mudanças para ver quais outras alterações coincidiram com cada teste e separar uma vitória real de um efeito de orçamento, promoção ou tracking.

O que é um registro de experimentos de marketing?

Um registro de experimentos de marketing é o histórico contínuo de todos os testes que o seu time roda: a hipótese, a mudança exata, onde rodou, as datas de início e fim, a métrica usada para julgar e o resultado. Ele responde "a gente já testou isso?" e "por que colocamos isso no ar?" meses depois.

Quase todo time guarda resultados em algum lugar: um slide, uma conversa no Slack, a página de Experimentos do Google Ads. O problema é que tudo fica espalhado e perde o contexto mais importante, como o que mais mudou enquanto o teste estava no ar. O registro junta todos os testes num só lugar, no mesmo formato, com datas que você consegue alinhar com os resultados.

Ele não é o mesmo que um log de mudanças de marketing, mas os dois andam juntos. O log de mudanças registra cada alteração em campanhas, site, tracking e CRM. O registro de experimentos guarda as mudanças feitas de propósito para aprender algo. Quando os dois ficam na mesma linha do tempo, você vê quais mudanças de rotina coincidiram com cada teste.

Três motivos para manter um:

  • Evitar testes repetidos. Pessoas novas no time ou uma nova agência costumam repetir testes que já falharam porque ninguém anotou o resultado.
  • Defender decisões. Quando o cliente pergunta por que a landing page é assim, você mostra o teste, as datas e os números.
  • Julgar resultados com justiça. Um teste só é tão limpo quanto o período em que rodou. O registro mostra se esse período foi tranquilo.

O que cada registro de experimento precisa ter?

Cada entrada deve ter detalhe suficiente para que alguém que não estava lá consiga repetir o teste ou confiar no resultado. O guia de plano de experimento da Optimizely organiza isso em por que rodar (a hipótese), quando e onde a variação roda, quem vê, o que a variação muda e como o sucesso é medido. Some o resultado e a decisão e o registro fica completo.

CampoO que escreverExemplo
HipóteseSe mudarmos X, a métrica Y vai mudar por causa de ZUm formulário menor vai subir a taxa de leads porque no celular as pessoas desistem no campo 6
MudançaA alteração exata, antes → depoisCampos do formulário 9 → 5
OndePlataforma, conta, campanha ou páginaPágina /demo, todo o tráfego
MétodoTeste dividido ou comparação antes/depoisExperimento personalizado do Google Ads, 50/50
DatasInício, fim previsto, fim real3/11 a 1/12
Métrica de sucessoUma métrica principal, escolhida antes do inícioLeads a cada 100 sessões
ResponsávelQuem subiu e quem analisaAna (subiu), Léo (análise)
ResultadoNúmeros dos dois braços e a confiança, se a ferramenta mostrar4,1% vs 3,6%
DecisãoAplicar, reverter, repetir ou inconclusivoAplicado em 2/12
Mudanças simultâneasTudo o que mudou durante o testeOrçamento +20% em 15/11

O último campo é o que a maioria dos modelos esquece, e é ele que decide se dá para confiar no resultado. Preencha a partir do log de mudanças no fim do teste, não de memória. Se quiser uma estrutura pronta, parta de um modelo de log de mudanças de marketing e adicione colunas para hipótese, método e decisão.

Leia também: Documentação de marketing ops: o que registrar e onde entra o log de mudanças · Modelo gratuito de log de alterações de marketing (Sheets, Excel, CSV)

Como registrar experimentos do Google Ads e testes do Meta Ads?

Registre cada experimento no dia em que for agendado e de novo quando terminar. As plataformas guardam as configurações do teste, mas não a sua hipótese, a decisão tomada nem as mudanças feitas em volta dele.

Experimentos do Google Ads

No Google Ads, os experimentos personalizados ficam em Campanhas → Experimentos, onde você clica no botão de adição e escolhe Personalizado. Algumas regras da Ajuda do Google valem ir para o registro, porque mudam a leitura do resultado:

  • Campanhas de pesquisa podem dividir por cookies ou por pesquisas; campanhas de display sempre dividem por cookies. Anote qual divisão você usou.
  • A divisão de tráfego não pode ser alterada depois da configuração, então a divisão anotada vale para o teste inteiro.
  • O Google recomenda rodar o experimento por pelo menos 4 a 6 semanas, mais se as conversões demoram, e exclui os primeiros 7 dias dos resultados para cobrir o período de adaptação.
  • O Google avisa que mudanças na campanha original ou no experimento durante o teste dificultam a interpretação. Cada uma delas vai para o campo "mudanças simultâneas".
  • Experimentos encerrados manualmente ("Finalizar agora") não são aplicados automaticamente; só os que chegam à data de término definida. Anote a data real e como o teste terminou.

Para um exemplo prático testando uma página assim, veja como medir uma mudança de landing page.

Testes A/B do Meta Ads

O Gerenciador de Anúncios da Meta tem testes A/B próprios. Registre com os mesmos campos: a variável testada, o público, as datas, a métrica escolhida e o resultado que a Meta mostrou. Inclua edições de orçamento, público ou criativo feitas nos conjuntos testados durante o teste, porque o relatório da Meta não separa isso da sua variável.

Testes antes/depois no site

Muitos testes não têm divisão nenhuma: a página nova entra no ar e você compara semanas. São os que mais precisam do registro, porque nada no desenho do teste protege contra outras mudanças. Anote o horário exato de publicação e trate cada mudança simultânea como ameaça ao resultado.

Por que o resultado do experimento se mistura com outras mudanças?

Porque nenhum teste roda isolado. Nas semanas em que ele está no ar, alguém sobe um orçamento, o Smart Bidding se ajusta, sai uma newsletter, uma tag é republicada ou um concorrente faz promoção. Qualquer uma dessas coisas pode mexer na métrica que você está olhando.

Testes divididos resolvem parte disso: se os dois braços recebem o mesmo tipo de tráfego ao mesmo tempo, uma alta sazonal atinge os dois. Mas uma mudança que afeta mais um braço que o outro, ou uma mudança de tracking que quebra uma ação de conversão, ainda distorce o resultado. Testes antes/depois ficam expostos a tudo.

As fontes mais comuns de contaminação:

  • Edições dentro do teste. Mudanças de orçamento, meta de lance ou público nas campanhas testadas.
  • Mudanças de tracking. Uma nova versão do Google Tag Manager, um ajuste no banner de consentimento ou uma ação de conversão alterada mudam contagens sem mudar o comportamento.
  • Outros canais. E-mail, redes sociais ou promoções offline que trazem visitantes diferentes durante o teste.
  • Eventos externos. Feriados, datas de venda como a Black Friday e falhas de plataforma.

Anotações nos relatórios ajudam, mas não substituem o registro. As anotações do GA4, por exemplo, aceitam título de 60 caracteres e descrição de 150, com até 1.000 por propriedade: servem como marcador no gráfico, não como registro de hipótese e resultado. Use-as para apontar para a entrada do registro; o guia de anotações do GA4 mostra como configurar.

Como provar qual mudança causou o resultado do experimento?

Coloque o teste e todas as outras mudanças do mesmo período numa linha do tempo, descarte o tracking primeiro e veja se alguma mudança simultânea explicaria a diferença sozinha. Se nenhuma explica, a mudança testada é a melhor explicação; se alguma explica, o resultado é inconclusivo e o teste deve ser repetido.

  1. Confirme que o tracking se manteve. Verifique se ações de conversão, tags e consentimento não mudaram durante o teste.
  2. Liste as mudanças simultâneas. Puxe todas as alterações das datas do teste e da semana anterior: do time, automações da plataforma, publicações no site e promoções.
  3. Veja qual braço cada mudança atingiu. Num teste dividido, uma mudança que atingiu os dois braços igualmente pesa menos que uma que atingiu só um.
  4. Compare o momento. Se a métrica mexeu no dia de uma mudança simultânea, e não no início do teste, essa mudança é a causa mais provável.
  5. Escreva o veredito. Provado, provável ou inconclusivo, com o motivo.

Com todas as mudanças numa só linha do tempo, você veria na hora que um aumento de orçamento caiu no meio do teste da página, antes de reportar a alta como vitória da página. O Changeline mantém essa linha do tempo por cliente: as alterações do Google Ads são importadas automaticamente e o time registra ao lado as mudanças de site, tracking, e-mail e testes, numa linha do tempo de mudanças compartilhada.

Exemplo. Um cliente de SaaS pergunta: "A nova página de preços aumentou os cadastros em 18% na semana passada. Dá para creditar a página?" O time alinha as mudanças da semana. A página entrou no ar na segunda, mas na quarta o orçamento do Meta Ads subiu 25% e na quinta saiu uma newsletter promocional. Os cadastros saltaram na sexta, não na segunda. Veredito: inconclusivo. O time repetiu a página num teste 50/50, que mostrou alta de 6%. (Nomes e números ilustrativos.)

  1. SegSiteNova página de preços no ar
  2. QuaMeta AdsOrçamento +25%
  3. QuiE-mailNewsletter promocional enviada
  4. SexCadastros +18%
Exemplo

Como manter o registro de experimentos útil com o tempo?

Faça do registro parte do lançamento de cada teste, revise numa frequência fixa e guarde as entradas antigas mesmo quando o teste falhou. O registro só serve se estiver completo e for fácil de pesquisar.

  1. Escreva a hipótese
  2. Anote datas e método
  3. Segure outras mudanças
  4. Registre o veredito
  • Sem registro, sem lançamento. Teste sem hipótese e métrica de sucesso escritas não começa.
  • Um padrão de nome. Use o mesmo nome no registro, na plataforma e nos relatórios, por exemplo 2026-11 · Pesquisa · CPA desejado 40 vs 32.
  • Guarde os fracassos. Testes que falharam ou deram inconclusivo evitam que a próxima pessoa os repita.
  • Revise todo mês. Leia os testes do mês ao lado dos resultados do mês. Isso também torna explicar uma queda ao cliente bem mais rápido.
  • Segure mudanças durante o teste. Se uma edição urgente precisar acontecer, registre e marque o teste como afetado.

Para uma visão mais ampla de como avaliar se uma mudança funcionou, veja como medir o impacto de mudanças de marketing.

Checklist

  • Hipótese escrita antes do lançamento
  • Uma métrica de sucesso principal
  • Datas de início e fim anotadas
  • Teste dividido ou antes/depois indicado
  • Mudanças simultâneas listadas
  • Veredito e decisão registrados

Congelamentos e transições sem perder o histórico

O Changeline coloca as alterações do seu time, as alterações importadas do Google Ads e as edições de site, tracking e CRM em uma linha do tempo por cliente.

Plano Free: 1 projeto, 2 editores, 15 dias de histórico. Sem cartão.

Perguntas frequentes

Qual a diferença entre registro de experimentos e log de mudanças?

O log de mudanças registra cada alteração em campanhas, site, tracking e CRM. O registro de experimentos guarda só os testes: hipótese, método, datas, métrica de sucesso, resultado e decisão. Mantenha os dois na mesma linha do tempo para ver quais mudanças de rotina coincidiram com cada teste e se elas explicariam o resultado.

Quanto tempo um experimento de marketing deve durar?

Depende do volume. Para experimentos do Google Ads, o Google recomenda pelo menos 4 a 6 semanas, mais quando as conversões demoram, e exclui os primeiros 7 dias dos resultados. Defina a duração antes de começar e anote, para ninguém encerrar o teste assim que os números parecerem bons.

Posso alterar uma campanha enquanto o experimento está rodando?

Pode, mas o Google recomenda fazer o mínimo de mudanças, porque elas dificultam a interpretação. Se uma mudança for inevitável, anote a data e a alteração exata e marque o experimento como afetado, para quem ler o resultado depois saber que o período não foi limpo.

Uma planilha basta como registro de experimentos?

Para poucos testes por trimestre, sim, desde que todos usem as mesmas colunas e preencham no lançamento. Fica difícil quando os testes coincidem com muitas outras mudanças, porque a planilha não mostra o teste e as outras alterações na mesma linha do tempo, que é de onde vem a maioria das conclusões erradas.

O que fazer com um teste inconclusivo?

Registre como inconclusivo, com o motivo: volume baixo, mudança simultânea ou problema de tracking. Depois decida se vale repetir em condições mais limpas. Entradas inconclusivas continuam úteis, porque mostram o que foi tentado e por que a resposta ainda não é conhecida.

Fontes

  1. Configurar um experimento personalizado – Ajuda do Google Ads
  2. Perguntas frequentes sobre experimentos – Ajuda do Google Ads
  3. Sobre as anotações – Ajuda do Google Analytics
  4. Create a basic experiment plan – Optimizely