9 passos para implementar um teste A/B
No items found.

Passo a passo para implementar um teste A/B

‚Äć

O teste A/B tem como principal objetivo entregar aos usu√°rios duas ou mais variantes da mesma p√°gina e entender qual apresenta melhor resultado para o objetivo proposto. Neste artigo n√£o vou me aprofundar nos conceitos do teste, mas sim, entregar uma sugest√£o de passos necess√°rios para colocar ele em pr√°tica. Importante ressaltar que minhas sugest√Ķes s√£o baseadas na minha experi√™ncia e nos aprendizados que tive no meu primeiro teste A/B.

‚Äć

De forma geral, os passos são simples: envolve planejamento, execução e análise. Mas existem uma série de detalhes dentro de cada um deles que pode deixar muita gente confusa, então vou falar um pouquinho sobre cada um deles.

‚Äć

  1. Planejamento

‚Äć

Defina seus objetivos e crie sua hipótese

Tenha claro quais respostas voc√™ est√° buscando com o teste. No meu caso, esta foi a etapa em que eu levantei todas as minhas d√ļvidas, que se tornaram meu ponto de partida. Com base nelas, busquei entender quais delas os dados poderiam responder, gerei algumas hip√≥teses para valida√ß√£o e defini o que seria a principal m√©trica de sucesso.

‚Äć

Aqui é muito importante ter sua hipótese bem definida, pois é ela que irá direcionar os passos seguintes, como a variante de teste.

‚Äć

Crie sua variante

Uma variante pode ser um texto diferente, um componente de outra cor, uma interface com a ordem dos elementos diferentes, entre outras in√ļmeras vari√°veis. Entretanto, independente do que seja, crie essa vari√°vel e certifique-se do impacto que ela causa (ou n√£o) na jornada do usu√°rio.

‚Äć

No projeto em que implementei, a ideia era reduzir a jornada de compra, o que resultou na remoção de um dos passos do fluxo atual. Sendo assim, além de revisar cuidadosamente a jornada, sempre que surgia uma oportunidade, envolvia o time para entender se não existiam cenários que eu não estaria considerando. 

‚Äć

Recomendo a participação de pelo menos uma pessoa de desenvolvimento e o responsável pelo teste de qualidade do produto - eles são ótimos para prever cenários que às vezes deixamos passar!

‚Äć

Defina os detalhes finais e valide

Tendo a variável desenhada, é a hora de definir os pontos mais práticos do teste. Quanto tempo de duração ele terá? Com base no esforço técnico necessário, quando poderá ser iniciado? Quais são os insumos e ferramentas necessárias para realizar o teste?

‚Äć

Tendo tudo isso organizado, leve todo esse planejamento para a validação das partes interessadas e deixe todos a par do que está acontecendo. No meu caso, o teste seria aplicado em um de nossos clientes, portanto foi importante e necessário a validação e a percepção do cliente em relação a tudo o que planejamos até aqui.

‚Äć

  1. Execução

‚Äć

Desenvolva e teste a variante

Esta √© a etapa em que n√≥s, designers, fazemos o handoff e a variante entra para a sprint de desenvolvimento. √Č muito importante que a variante tamb√©m passe pelos testes de qualidade do produto.¬†

‚Äć

Al√©m disso, retome suas perguntas iniciais e certifique-se de que voc√™ consiga gerar dados para responder o m√°ximo de d√ļvidas poss√≠veis. Lembre-se que os dados respondem perguntas qualitativas (QUANTOS, QUAIS, QUAL?), e se suas d√ļvidas come√ßam com COMO ou POR QUE talvez esse n√£o seja o tipo de teste ideal para ser implementado.

‚Äć

No projeto em que apliquei este teste, inclu√≠mos um bot√£o a mais na interface, ent√£o foi necess√°rio criar uma tag de analytics para ele. Definimos os par√Ęmetros necess√°rios que precis√°vamos coletar e o momento exato do disparo. Esta tag tamb√©m passou por teste para nos certificarmos de que estar√≠amos gerando os dados necess√°rios.

‚Äć

Configure o teste no Firebase

Cito o Firebase, pois foi a ferramenta que utilizamos para execução do teste, mas vale também para a ferramenta que você for usar. Para entender melhor como o Firebase funciona com testes A/B, sugiro esta leitura.

‚Äć

Esta √© a etapa de colocar em pr√°tica tudo o que foi definido anteriormente: configurar o objetivo principal, as metas secund√°rias, per√≠odo, a base que receber√° o teste, vari√°veis e demais configura√ß√Ķes.

‚Äć

O teste que apliquei tem a duração de 3 meses. Tínhamos uma variante, então dividimos a base total em dois e cada uma recebeu uma variante.

‚Äć

Prepare os dados de acompanhamento e faça suas apostas análises

Pra mim, esta √© a parte mais legal do teste A/B. √Č quando voc√™ d√° aquela espiadinha di√°ria e tenta controlar a ansiedade tentando adivinhar o resultado final do teste. Esta etapa n√£o √© mandat√≥ria, mas no projeto em que atuei ela foi muito importante, pois pude fazer o "reconhecimento de campo" da ferramenta, me familiarizando com todos os termos, dados gerados e tirando d√ļvidas sobre os dados que a mesma entregava. Al√©m disso, usei o Data Studio para criar alguns gr√°ficos que responderam parte das perguntas iniciais, que tamb√©m foram uma fonte para aquela espiadinha di√°ria.

‚Äć

  1. An√°lise

‚Äć

Re√ļna o time para obter insights

√Č muito importante ter a vis√£o de outras pessoas do time. √Č importante que o seu teste tenha atingido um n√≠vel de confian√ßa de no m√≠nimo 95%. Quando voc√™ atingir esse √≠ndice, procure envolver as partes interessadas e juntos, conversem sobre os principais insights. Quando realizei essa etapa houve um comportamento fora do normal e sem o contexto completo, comecei a formular minhas pr√≥prias teorias para justificar. Foi quando o gerente de projetos, que tamb√©m estava acompanhando, trouxe um fato muito importante e que fez toda a diferen√ßa na nossa an√°lise.

‚Äć

Reporte os resultados

Sou suspeita em falar, porque documento absolutamente tudo o que posso, mas recomendo fortemente que voc√™ tamb√©m fa√ßa isso com o seu teste. Al√©m de poder distribuir esse conhecimento para outras pessoas, o teste pode ser √ļtil em algum momento no futuro. No meu caso, al√©m de documentar, criamos um report para apresentar para o cliente.¬†

‚Äć

Decida a melhor variante

Aqui não tem segredo: depois de tirar todos os insights do teste, envolver o time e validar com todas as partes interessadas, é a hora de definir e implementar a melhor variante. Ou não, pois nada garante que você invalide suas hipóteses, siga com o produto como já estava em produção e tenha que começar um novo teste.

‚Äć

Um resumo do que rolou

Logo abaixo trago um resumo dos principais pontos desse passo a passo em formato de checklist. Se você leu até aqui, agradeço demais pela sua leitura e adoraria ouvir a sua contribuição e opinião sobre o assunto!

‚Äć

‚úÖ Tenha claro o objetivo do seu teste;

✅ Crie uma hipótese para validação e defina a meta principal;

‚úÖ Crie sua variante, revise a jornada do usu√°rio e valide com o time;

‚úÖ Desenvolva e teste a variante;

‚úÖ Certifique-se de que conseguir√° coletar todos os dados necess√°rios, e se preciso, implemente novas tags;

✅ Configure o teste na ferramenta da sua preferência;

‚úÖ Prepare o ambiente onde far√° suas an√°lises;

‚úÖ Ao final do per√≠odo, re√ļna o time para coletar os principais achados;

‚úÖ Documente tudo!

‚úÖ Tome uma decis√£o e, se for o caso, implemente a melhoria.

‚Äć

Débora Seibert UX/UI Designer

‚Äć

‚Äć

‚Äć

Posts relacionados

Conheça nossos cases

Ver mais trabalhos
Vamos conversar?

Seja para desenvolver um ecommerce, um app para sua empresa ou uma plataforma para ajudar seu negócio a inovar, estamos disponíveis para te ajudar.

Letter image
contato@kobe.io
+55 51 3737 0203
Obrigado por entrar em contato!
Oops! Something went wrong while submitting the form.