Antecipando resultados

Diego Jovanholi
6 min readMay 8, 2017

--

Como uma alteração mínima pode ajudar a aumentar sua conversão

Dentro de empresas de tecnologia, quem trabalha com produto certamente já teve que lidar com situações em que foi necessário fazer propostas de pequenas iterações que agreguem valor, além de testar e validar ideias em um curto espaço de tempo.

Neste post, vamos apresentar, através de um projeto bem pequeno, um pouco do fluxo de trabalho que estamos implementando aqui na OLX. Foi a primeira vez em que fomos capazes de gerar hipóteses para um problema identificado, colher dados quantitativos, qualitativos e validar as soluções de forma ágil, em um único sprint.

Ponto de partida

Listing de anúncios — App OLX Android

Será que conseguiríamos, através de uma alteração no botão, atrair mais usuários para a tela de inserção do anúncio e, ainda, aumentar a taxa de inserção de anúncios? Foi possível levantar hipóteses e desenvolver propostas para melhorar a compreensão deste botão.

Desafios

Analisar primeiro os dados

Não pensar em hipóteses sem analisar os dados disponíveis. Muitas vezes, podemos fazer suposições baseadas em nossa experiência profissional, mas cada produto é único e possui suas particularidades. O “eu acho” não tem muito espaço dentro de um produto.

Tempo

Normalmente, o time de design trabalha com 1 sprint de diferença dos desenvolvedores, com o objetivo de criar e refinar os itens a serem implementados no sprint posterior. O sprint na OLX tem duração média de 2 semanas. Nosso desafio foi adaptar as etapas neste prazo.

Go ahead!

1. Coletando evidências

1.1 AppSee

Observando o mapa de calor gerado a partir do AppSee, foi possível visualizar os itens mais selecionados a partir da tela inicial do aplicativo Android:

  • 66,5% Detalhe do anúncio
  • 16,9% Saíram do aplicativo
  • 10,6% Item do filtro
  • 0,3% Inserir anúncio

1.2 Análise dos dados quantitativos

Com base em uma análise nos dados, foi possível verificar que 22.4% dos usuários concluíram a inserção do anúncio a partir do drawer menu contra 8.7% a partir do Fab (Floating action button) Icon.

1.3 Análise dos dados qualitativos

Através de um teste de usabilidade realizado anteriormente chegamos as seguintes descobertas:

De 8 usuários apenas 3 utilizaram o Fab Icon para adicionar um anúncio, usando diretamente o drawer menu;

2. Identificação do problema e geração de hipóteses

Fab Icon

3. Desenvolvendo protótipos

Para chegar no resultado mais próximo do real, foi utilizado o software Principle, que se apresentou bastante eficiente para desenvolver interações simples. Foram desenvolvidos inicialmente 4 protótipos atendendo os requisitos das ações propostas. Adicionalmente, foi desenvolvido mais 1 protótipo seguindo os feedbacks dos testes de usabilidade.

4. Aplicação do teste

O Principle atualmente só tem suporte ao iOS nos forçando buscar soluções criativas para simular o Android.

Foram aplicados 25 teste de usabilidade de guerrilha, que consistiu em buscar os usuários na rua. Os perfis foram variados, indo de pessoas que não conheciam até aqueles que já utilizam a OLX.

Tentamos sempre deixar bem claros os objetivos de cada teste que fizemos, até dos mais simples, para nos ajudar a formatar um roteiro básico. Neste caso, os objetivos foram:

1. Verificar se os usuários que precisam inserir anúncios percebem o botão nos diferentes protótipos desenvolvidos.

2. Verificar o entendimento dos participantes sobre o ícone utilizado nos protótipos.

Resultado geral

Opção 1: Em todos os casos, o FAB não foi notado num primeiro momento. Aparentemente, a parte inferior da tela é menos notada pelos usuários. Perguntados sobre o ícone do botão, quase todos os usuários disseram que parecia ser o primeiro passo da inserção de anúncio.

Opção 2: Em todos os casos, o FAB não foi notado num primeiro momento. Perguntados sobre o ícone do botão, alguns dos usuários disseram que parecia ser a opção de visualizar mais anúncios.

Opção 3: Em todos os casos, o FAB não foi notado num primeiro momento. Perguntados sobre o ícone do botão, nenhum dos usuários soube informar qual seria a funcionalidade do botão.

Opção 4: Em apenas 1 caso o FAB foi notado. Perguntados sobre o ícone do botão, quase todos os usuários disseram que parecia ser o primeiro passo da inserção de anúncio.

Opção 5: Na maioria dos casos o FAB foi notado. Perguntados sobre o ícone do botão, todos os usuários tiveram total entendimento sobre a funcionalidade do Fab Icon.

Conclusão do teste

  • O FAB Icon tradicional teve baixo desempenho independente do ícone.
  • O ícone que teve o melhor entendimento foi o de câmera, mas mesmo assim muitos usuários apresentaram dúvida.
  • O FAB com ícone mais texto fixo foi o que teve melhor desempenho.

Antecipando resultados

Considerando o tempo e custo envolvidos, optamos pelo teste de “guerrilha”. Esse tipo de teste é mais econômico para a empresa e tem grande eficiência para validações rápidas.

Vamos validar com números?

Teste A/B

O teste A/B foi liberado para 20% da nossa base. Nele, foi testada a versão atual (versão A) versus a versão com o novo Fab Icon (versão B).

A versão B obteve:

  • Aumento de 19.93% na taxa de inserção de anúncios via floating button (FAB) (de 22.24% para 26.67%)
  • Aumento de 4.91% no número de anúncios inseridos por sessão (se antes inserimos 100 anúncios agora serão 105)
  • Aumento de 18% no número de clicks (FAB) por sessão
  • Aumento de 43% no share de inserção (em relação a inserção via menu lateral) passando de 28% para 40% dos anúncios inseridos

Desdobramentos futuros

Realizar teste A/B para validar qual opção é mais efetiva de forma quantitativa: Inserção pelo menu lateral ou pelo FAB Icon

Aprendizados

  • Early-validation nos possibilitou refinar as ideias e aprender mais sobre os usuários.
  • É importante ressaltar o impacto que aplicativos como Facebook e WhatsApp têm sobre os usuários. Alguns entrevistados atrelaram o FAB Icon ao Chat flutuante do Facebook.
  • Ao selecionar “Inserir anúncio” pelo menu lateral, um dos entrevistados após notar o FAB, pensou que se tratava do anúncio aberto anteriormente aguardando a finalização do mesmo;
  • Alguns usuários atrelaram o FAB Icon ao Chat ou inserir a foto para usar depois;
  • A maioria dos usuário associa o menu de opções a ações importantes, esse foi o segundo item mais selecionado nos testes aplicados.

Até a próxima ;)

Quer nos conhecer melhor?

Manda um e-mail pra gente, vai: design@olxbr.com. Ah, também estamos buscando designers incríveis para completar nossa equipe. ;)

--

--