Research And Test

  1. Testar
  2. Reduzir o custo de teste
  3. Aumentar o tempo de teste

BASE:

BASE 2 TESTE:

Tempo de A/B Test

  • 3 a 4 semanas para testar

Então Qual Estratégia Seguir? Primeiro - O que NÃO fazer:

  • Copiar trends de mercado não funciona
  • Copiar grandes players também não
  • Não copiar cegamente, provavelmente seu competidor também fez uma cópia (Blind Leading the Blind)

Primeiro Passo - Criar Processos

If you can’t describe what you’re doing as a process, you don’t know what you’re doing - William Deming

  1. Onde estão os problemas do site?
  2. Quais são os problemas?
  3. Porque são problemas?
  4. Transformar problemas em hipóteses testáveis!
  5. Priorizar testes e soluções instantâneas

Segundo Passo - O que realmente IMPORTA ?

O que realmente importa para o usuário, como ele faz sua escolha de comprar algo ou contratar o nosso serviço?

Quais são os principais critérios que ele usa para nortear sua decisão?

Terceiro Passo - Analisar o Site

Porque ele está naquela orgem específica?

Porque os blocos de conteúdo estão naquela disposição específica?

Não seja aquele cara cheio de dados que não servem para nada - Os dados são passivos e precisam ser interpretados pelos seres humanos de acordo com o negócio em si

Quarto Passo - O que Realmente Importa?

• whose problem are we solving? • what do they need? • what do they think they want? • why? • how are they choosing / making a decision? • why? • what are they thinking when they see our offer? • how is what well sell clearly different? where is the site leaking money? • what is the problem? • what are they doing or not on the website? what leads more people to do X?

ResearchXL

Technical Analycis

  1. Está quebrado?
  2. Onde?
  3. Quais Navegadores?
  4. Quais Devices?
  5. Quais Páginas estão lentas?

Heuristic Analysis

  • Navegação individual nas páginas por várias pessoas, focando:
  1. Relevância?
  2. Clareza?
  3. Motivação?
  4. Fricção?

Nota: Toda a página deve ter uma ação desejada, um CTA que seja

Criar um template de imagens com as anotações do que possivelmente está errado, como a imagem:

img

(https://lztforeferfiles.s3.us-west-2.amazonaws.com/mkt-gro-research-and-test)

Fogg Behavior Model

![img] (https://lztforeferfiles.s3.us-west-2.amazonaws.com/mkt-gro-research-and-test)

(https://lztforeferfiles.s3.us-west-2.amazonaws.com/mkt-gro-research-and-test)

img

Quanto maior a motivação maior a fricção posso colocar no site. Por exemplo, comprando um Jeep ou um Pinball, algo raro que a pessoa quer muito, você não precisa de algo muito sofisticado.

Quinto Passo - Digital Analytics

  1. Onde estão os vazamentos?
  2. Quais segumentso?
  3. O que os usuários estão fazendo?
  4. Qual ações correlacionar?
  5. Quais conversões são maiores?

Sempre sempre sempre tentar coisas diferentes. Ele mostrou o exemplo da clínica de alergia que alteraram o menu tentando deixar mais fácil para as pessoas buscarem por “produtos de alíveio”. Funcionou. Ele tentou melhorar ainda mais deixando-o laranja. Porém 90% dos usuários não clicava.

Observar a % de pessoas que fazem o scroll até o fim da página. Se está realmente funcionando para que as pessoas cheguem ao fim do conteúdo. Indicador importante de que você precisa mudar alguma coisa. Fazer a página mais compacta por exemplo.

Se você tem linhas horizontais escuras, ou mudança de backgrounds, algo que não faz parte do background anterior é perigoso o usuário entender que o site está acabando.

Sexto Passo - Qualitative Surveys

  1. Buyer Groups
  2. Wich Problem Are they solving?
  3. How are they deciding?
  4. What’s holding them back?
  5. What else do they want to know?

  • Perguntas abertas para descobrir coisas novas!

  • Não tenha medo de cobrir as hesitações/fricções: Quais foram as dificuldades, quais problemas, o que te impediu de comprar?

  • O que você tem a dizer sobre si mesmo?

Sétimo Passo - User Testing

  • What’s the difficult to understand?
  • WHat’s the difficult to do?
  • What goes wrong?

Nem sempre o teste dos usuários é confiável. Exemplo da loja de roupas que o usuário ficou 7 minutos no checkout e disse que estava tudo bem!

Sempre parta para missões nos testes dos usuários:

  1. Criar uma procuração; Cadastrar um Trabalho; Cadastrar um JOB;
  2. Comércio: Achar um produto específico / Achar uma informação específica / Achar algo mais váriavel — um teste de memória, uma calça jeans masculina azul

Oitavo Passo - Planilhar os Problemas

img

Ver sistema PXL

Nono Passo - Quando terminar o teste?

  1. Enough sample time? Muitas pessoas fazendo os teste?
    • Cuidar com mudança de comportamento dos usuários no fim de semana
    • Geralmente leva uma semana
  2. Multiple Business Cycles
  3. Statistical significance reached

Décimo Passo - Erros de Teste

  1. Testar coisas idiotas
  2. Você acha que sabe o que funciona e não precisa testar
  3. Copiar outros testes
  4. Seus exemplos sao poucos (sample size)
  5. Pouco tráfego no seu site ou em páginas específicas
  6. Não rodar testes tempo suficiente 1-2 semanas ou mais
  7. Não testar a semana inteira (diferença de comportamento semanal impacta muito)
    • Também cuidar com testes longos porque podem existir muitos usuários reutilizando a plataforma/site
  8. Testar data que não é enviada a third-party analytics (Comparação com analytics)
  9. Desistir depois da primeira falha
  10. Cuidar com falsos positivos e negativos

Insights

  • Exemplo

Todo

  • Ver sistema PXL
  • Testar Site Extensivamente