Neste documento, descrevemos técnicas a serem consideradas ao realizar um teste A/B das APIs Place Autocomplete e Address Validation da Plataforma Google Maps.
Alguns benefícios de usar o Place Autocomplete e a API Address Validation são:
- Melhor experiência do cliente: ao fornecer sugestões em tempo real de endereços e lugares, você ajuda os clientes a concluir o pagamento com mais rapidez e facilidade. Isso pode melhorar a experiência do cliente.
- Melhoria na precisão dos dados: as APIs Place Autocomplete e API Address Validation podem ajudar a melhorar a precisão dos dados do cliente. Isso pode ser especialmente importante no e-commerce, já que dados de endereço precisos são essenciais para a entrega de pacotes.
Para melhorar a qualidade dos seus endereços, faça um teste A/B para avaliar qual solução de validação atende melhor às suas necessidades. Isso permite que você decida quantitativamente qual produto é mais adequado para seu caso de uso.
Um teste A/B é uma forma de comparar duas versões de uma página da Web ou de um app. É um tipo de experimento controlado usado para determinar o efeito de uma mudança em uma variável em um resultado mensurável.
Para realizar um teste A/B, crie duas versões de uma página ou app, uma como controle e outra com a mudança mensurável. Em seguida, você mostra essas versões para usuários diferentes e mede como eles interagem com elas. A versão com melhor performance é a vencedora.
Visão geral da arquitetura do sistema
Vamos analisar o teste A/B da Address Validation em um caso de uso de e-commerce. O diagrama de arquitetura abaixo mostra como um cliente interagiria com sua experiência de comércio, permitindo que você determine a estratégia de validação mais eficaz.
[Contexto do sistema] Teste A/B da Address Validation
Os sistemas envolvidos no teste A/B do valor da API Address Validation.
O processo de teste A/B
Ao pensar no processo geral de teste A/B, há quatro etapas a serem consideradas.
- Preparação: identificar os requisitos, o escopo e o cronograma do teste.
- Criar: implemente as APIs Place Autocomplete e API Address Validation em um ambiente para executar o teste.
- Execução: colete métricas enquanto o teste está em execução, até que resultados significativos sejam obtidos ou o tempo expire.
- Analisar: compare os resultados com a hipótese e identifique as próximas etapas.
Vamos falar sobre cada um deles.
Preparação
Decidir sobre os requisitos de teste A/B
Descoberta inicial
Pergunte-se: por que você está adicionando ou mudando um provedor de Address Validation? Por exemplo, usando o Place Autocomplete do Google Maps:
- Economiza tempo: você não precisa digitar o nome inteiro de um lugar. Basta começar a digitar para ver as sugestões.
- Reduz erros: se você digitar o nome de um lugar incorretamente, o Place Autocomplete do Google Maps ainda vai sugerir o lugar correto.
A validação de endereços tem muitos benefícios, incluindo:
- Melhoria nas taxas de entrega: a validação de endereço pode ajudar a melhorar as taxas de entrega, garantindo que as correspondências e os pacotes sejam enviados para o endereço correto. Isso pode economizar tempo e dinheiro das empresas, além de melhorar a satisfação do cliente.
- Qualidade de dados aprimorada: Address Validation pode ajudar a melhorar a qualidade de dados identificando e corrigindo erros em endereços. Isso pode melhorar a precisão das campanhas de marketing e de outras iniciativas baseadas em dados.
Como decidir sobre a hipótese
Defina a hipótese que você quer testar. Confira dois exemplos:
1. Taxa de conversão
Ao adicionar uma solução de preenchimento automático, é comum notar um pequeno aumento nas taxas de conversão, o que é uma boa métrica para acompanhar. Se você estiver mudando sua solução de preenchimento automático de outro provedor, é esperado que a taxa de conversão seja estável. Se a taxa de conversão diminuir, a primeira coisa a verificar é a implementação.
A taxa de conversão é importante, mas pode não contar toda a história. Adicionar uma solução de Address Validation é uma forma de evitar que as pessoas enviem endereços de baixa qualidade no ponto de entrada e pode adicionar algum atrito natural à captura de endereços em alguns cenários. Isso pode levar a uma queda nas taxas de conversão gerais, mas não necessariamente deve ser visto como algo ruim. Os pedidos não concluídos devido à adição da validação de endereço podem ter sido associados a dados de endereço de baixa qualidade que resultariam em um custo para a empresa por meio de estornos de entrega.
2. Redução de endereços de baixa qualidade
É aqui que uma boa solução de Address Validation realmente se destaca. Ao implementar a Address Validation, você vai notar uma redução nos dados de endereço de baixa qualidade.
Se você estiver comparando uma solução nova com uma atual, pode ser tentador comparar apenas as taxas de correspondência de "endereços válidos" e selecionar o serviço que oferece uma taxa mais alta. Isso pode ser enganoso, porque um serviço pode estar fornecendo mais falsos positivos do que o outro.
Em vez disso, a métrica mais impactante é comparar o resultado bem-sucedido do uso dos dados de endereço. No e-commerce, por exemplo, o resultado desejado de capturar um endereço seria a entrega bem-sucedida de um pacote.
Criar
Agora vem a parte mais legal! É hora de criar uma nova solução para seus clientes. Já temos um guia prático para implementar o Place Autocomplete e a API Address Validation em uma finalização de compra de e-commerce. Recomendamos que você confira isso ao concluir esta etapa.
Mesmo que você não esteja criando especificamente para e-commerce, muitas das informações ainda são relevantes, principalmente as orientações sobre como determinar a qualidade do endereço com base na saída da API Address Validation.
Diagrama da arquitetura
Confira abaixo um exemplo dos contêineres que podem ser usados para criar um teste A/B em um ambiente de e-commerce:
[Ambiente de execução] Teste A/B da Address Validation
Os aplicativos, serviços e repositórios de dados importantes nos sistemas principais que alimentam a arquitetura. Clique para ampliar.
Como validar a implementação
Uma solução mal implementada vai produzir resultados de teste não confiáveis. Antes de realizar o teste A/B, é importante validar a solução com um pequeno grupo de usuários para garantir que ela funcione conforme o esperado. Podem ser testadores internos de controle de qualidade e/ou um grupo selecionado de testadores externos em quem você confia para dar feedback construtivo.
Executar
Aumentando aos poucos
Mesmo com a solução validada, ainda é uma boa ideia aumentar o teste lentamente, começando com um pequeno grupo de usuários. Dessa forma, bugs ou outros problemas podem ser detectados com antecedência e resolvidos rapidamente sem afetar uma grande porcentagem dos usuários.
Teste completo
Depois que a solução for testada por um pequeno grupo de usuários e os problemas forem resolvidos, poderemos passar para um teste A/B completo. Não precisa ser necessariamente uma divisão de 50/50 do tráfego, mas deve ser comparável em tamanho com um conjunto de uso em tempo real selecionado aleatoriamente.
Captura de métricas
Durante o teste, verifique se os dados adequados para apoiar sua hipótese foram capturados. Você pode usar uma plataforma de teste A/B durante esse processo para facilitar a coleta de dados e a análise posterior. A Plataforma Google Maps também coleta métricas de uso de APIs que podem ser úteis. Confira esta página para saber mais sobre como usar nossas ferramentas de relatórios.
Confira algumas métricas sugeridas:
Place Autocomplete
Taxa de conversão: a taxa de conversão/conclusão do seu formulário melhorou em relação ao período em que não havia uma solução de preenchimento automático?
Interação com a ferramenta: mais usuários estão interagindo com o Place Autocomplete em comparação com a solução anterior?
Address Validation
Sucesso na entrega: houve uma redução nas falhas de entrega devido à qualidade do endereço?
Mudanças de endereço: houve uma redução no número de cobranças por mudança de endereço que você recebeu das transportadoras?
Residencial x comercial: houve uma melhoria na captura de dados residenciais x comerciais? (apenas em alguns mercados)
Analisar
Agora que o teste acabou, é hora de analisar os resultados em relação aos critérios e à hipótese originais. Se você usou uma plataforma de teste A/B para concluir o processo, algumas informações já podem estar disponíveis.
Voltando à seção Redução de endereços de baixa qualidade acima, você também pode usar outras métricas que talvez não tenham sido capturadas pela plataforma de teste A/B. Pode ser a taxa de entregas com falha entre os cenários de teste, com dados de exemplo como estes:
| Solução A | Solução B | |
|---|---|---|
| Falhas na entrega | 1,75% | 1,23% |
Analisando o exemplo básico acima, fica claro que, para esse caso de uso, a Solução B seria a melhor escolha.
Conclusão
Esperamos que este guia tenha fornecido informações suficientes para você começar sua jornada de testes A/B. Embora tenha usado exemplos do espaço de e-commerce, os mesmos princípios básicos podem ser aplicados de forma geral. Identifique o resultado positivo de ter dados de endereço de boa qualidade na sua empresa e use isso como sua hipótese principal.
Incluímos os links mencionados no guia abaixo como sugestão de leitura.
Divirta-se!
Próximas etapas
Baixe o artigo Melhore a finalização da compra, o envio e as operações com endereços confiáveis e assista ao webinar Melhore a finalização da compra, o envio e as operações com o Address Validation .
Sugestões de leitura:
- Address Validation para finalização de compra em e-commerce
- Documentação do Place Autocomplete
- Documentação da API Address Validation
- Geração de relatórios da Plataforma Google Maps
Colaboradores
Autores principais:
Henrik Valve | Engenheiro de soluções da Plataforma Google Maps