Mierzenie wpływu weryfikacji adresu za pomocą testu A/B

W tym dokumencie opisujemy techniki, które warto wziąć pod uwagę podczas przeprowadzania testu A/B interfejsów API Google Maps Platform Autouzupełnianie miejscaWeryfikacja adresu.

Oto kilka zalet korzystania z interfejsów Place Autocomplete API i Address Validation API:

  • Lepsze wrażenia klientów: dzięki podawaniu klientom sugestii adresów i miejsc w czasie rzeczywistym możesz ułatwić i przyspieszyć proces płatności. Może to poprawić jakość obsługi klienta.
  • Większa dokładność danych: interfejsy Place Autocomplete API i Address Validation API mogą pomóc Ci zwiększyć dokładność danych o klientach. Jest to szczególnie ważne w przypadku e-commerce, ponieważ dokładne dane adresowe są niezbędne do pomyślnego dostarczenia przesyłek.

Aby poprawić jakość adresów, przeprowadź test A/B i sprawdź, które rozwiązanie do weryfikacji najlepiej spełnia Twoje potrzeby. Dzięki temu możesz podjąć decyzję, który produkt najlepiej pasuje do Twojego przypadku użycia.

Test A/B to metoda porównywania dwóch wersji strony internetowej lub aplikacji. Jest to rodzaj kontrolowanego eksperymentu, który służy do określania wpływu zmiany zmiennej na mierzalny wynik.
Aby przeprowadzić test A/B, utwórz 2 wersje strony lub aplikacji: jedną jako wersję kontrolną, a drugą ze zmianą, którą można zmierzyć. Następnie wyświetlasz te wersje różnym użytkownikom i mierzysz ich interakcje z nimi. Wygrywa wersja, która osiąga lepsze wyniki.

Omówienie architektury systemu

Przyjrzyjmy się testom A/B weryfikacji adresu w przypadku e-commerce. Poniższy diagram architektury pokazuje, jak klient wchodzi w interakcję z Twoją platformą handlową, co pozwala określić skuteczniejszą strategię weryfikacji.

[System Context] A/B Testing Address Validation

Systemy zaangażowane w testy A/B wartości interfejsu Address Validation API.

Diagram architektury przedstawia klienta wchodzącego w interakcję z systemem testów A/B w Twojej witrynie e-commerce. System ten decyduje, którą zmienną testu wyświetlić klientowi, na podstawie systemu oprogramowania sklepu e-commerce. Sklep internetowy wywołuje interfejs API w systemie oprogramowania Google Maps Platform. Zbiera też dane analityczne testów A/B, które są przetwarzane przez system oprogramowania analitycznego i przekazywane z powrotem do systemu testów A/B.

Proces testowania A/B

Ogólny proces testowania A/B składa się z 4 etapów.

  • Przygotowanie – określ wymagania, zakres i harmonogram testów.
  • Tworzenie – zaimplementuj interfejsy Place Autocomplete API i Address Validation API w środowisku, w którym chcesz przeprowadzić test.
  • Uruchom – zbieraj dane podczas testu, aż uzyskasz istotne wyniki lub upłynie czas.
  • Analiza – porównaj wyniki z hipotezą i określ dalsze działania.

Omówimy je po kolei.

Przygotowanie

Określanie wymagań dotyczących testów A/B

Wstępne odkrywanie

Zastanów się: dlaczego dodajesz lub zmieniasz dostawcę weryfikacji adresu? Na przykład za pomocą autouzupełniania miejsc w Mapach Google:

  • Oszczędność czasu: nie musisz wpisywać całej nazwy miejsca, wystarczy, że zaczniesz pisać, a zobaczysz sugestie.
  • Ogranicza liczbę błędów: jeśli popełnisz błąd w pisowni nazwy miejsca, funkcja autouzupełniania w Mapach Google i tak zaproponuje prawidłową nazwę.

Weryfikacja adresu ma wiele zalet, w tym:

  • Wyższe wskaźniki dostarczania: weryfikacja adresu może pomóc zwiększyć wskaźniki dostarczania, ponieważ zapewnia, że poczta i paczki są wysyłane na prawidłowy adres. Może to zaoszczędzić firmom czas i pieniądze oraz zwiększyć zadowolenie klientów.
  • Poprawa jakości danych: weryfikacja adresu może pomóc w poprawie jakości danych przez identyfikowanie i korygowanie błędów w adresach. Może to zwiększyć dokładność kampanii marketingowych i innych inicjatyw opartych na danych.

Wybór hipotezy

Zdecyduj, którą hipotezę chcesz przetestować. Oto 2 przykłady:

1. Współczynnik konwersji

Po dodaniu rozwiązania do wpisywania z wyprzedzeniem zwykle obserwuje się niewielki wzrost współczynnika konwersji. Warto śledzić ten wskaźnik. Jeśli zmieniasz rozwiązanie do wpisywania z wyprzedzeniem od innego dostawcy, możesz spodziewać się stałego współczynnika konwersji. Jeśli współczynnik konwersji spadnie, najpierw sprawdź implementację.

Współczynnik konwersji jest ważny, ale może nie mówić wszystkiego. Dodanie rozwiązania do weryfikacji adresu ma na celu zapobieganie przesyłaniu przez użytkowników adresów o niskiej jakości w momencie wprowadzania danych. W niektórych przypadkach może to utrudnić wpisywanie adresu. Może to spowodować spadek ogólnych współczynników konwersji, ale niekoniecznie należy to traktować jako coś negatywnego. Niekompletne zamówienia z powodu dodania weryfikacji adresu mogły być powiązane z danymi adresowymi o niskiej jakości, co spowodowałoby obciążenie firmy zwrotami kosztów dostawy.

2. Zmniejszenie liczby adresów o niskiej jakości

W takiej sytuacji przydaje się dobre rozwiązanie do weryfikacji adresów. Wdrażając weryfikację adresów, możesz spodziewać się zmniejszenia liczby danych adresowych o niskiej jakości.

Jeśli porównujesz nowe rozwiązanie z dotychczasowym, możesz mieć pokusę, aby porównać tylko odsetki dopasowań „dobrego adresu” i wybrać usługę, która zapewnia wyższy odsetek dopasowań. Może to wprowadzać w błąd, ponieważ jedna usługa może generować więcej fałszywych alarmów niż druga.

Bardziej miarodajnym wskaźnikiem jest porównanie wyników uzyskanych dzięki wykorzystaniu danych adresowych. Na przykład w przypadku e-commerce pożądany rezultat uzyskania adresu to ostatecznie udana dostawa przesyłki.

Kompilacja

Teraz zaczyna się najciekawsza część. Czas stworzyć nowe rozwiązanie dla klientów. Mamy już przydatny przewodnik po wdrażaniu autouzupełniania miejscinterfejsu Address Validation API w procesie płatności w sklepie internetowym. Zalecamy sprawdzenie tego podczas wykonywania tego kroku.

Nawet jeśli nie tworzysz aplikacji specjalnie z myślą o e-commerce, wiele informacji jest nadal istotnych, zwłaszcza wskazówki dotyczące określania jakości adresu na podstawie danych wyjściowych interfejsu Address Validation API.

Schemat architektury

Poniżej znajdziesz przykłady kontenerów, których można użyć do utworzenia testu A/B w środowisku e-commerce:

[Środowisko wykonawcze] Testy A/B weryfikacji adresu

Ważne aplikacje, usługi i magazyny danych w kluczowych systemach, które stanowią podstawę architektury. (Kliknij, aby powiększyć).

Diagram architektury przedstawia kontenery, które składają się na system oprogramowania do testów A/B i system oprogramowania aplikacji e-commerce. Ilustracja przedstawia klienta wchodzącego w interakcję z systemem równoważenia obciążenia, który kieruje go do aplikacji witryny e-commerce. Menedżer testów A/B komunikuje się z systemem równoważenia obciążenia, aby wybrać zmienną testu A/B, która ma być wyświetlana klientowi. Ten system testów A/B rejestruje też wyniki i konfigurację testu A/B w wybranej przez Ciebie bazie danych. Aplikacja internetowa e-commerce wykonuje wywołania interfejsu API do systemu oprogramowania Platformy Google Maps, a także raportuje zdarzenia analityczne do systemu oprogramowania Analytics, który rejestruje zdarzenia testowe w bazie danych wyników testów A/B.

Sprawdzanie poprawności implementacji

Źle wdrożone rozwiązanie da niewiarygodne wyniki testu. Przed przeprowadzeniem testu A/B warto najpierw sprawdzić rozwiązanie na małej grupie użytkowników, aby upewnić się, że działa ono zgodnie z oczekiwaniami. Mogą to być wewnętrzni testerzy kontroli jakości lub wybrana grupa testerów zewnętrznych, którym ufasz i od których możesz oczekiwać konstruktywnych opinii.

Uruchom

Stopniowe zwiększanie liczby wysyłanych wiadomości

Nawet po potwierdzeniu skuteczności rozwiązania warto stopniowo zwiększać liczbę użytkowników testujących, zaczynając od małej grupy. Dzięki temu błędy i inne problemy można wykrywać na wczesnym etapie i szybko je rozwiązywać, nie wpływając na dużą część użytkowników.

Pełny test

Gdy rozwiązanie zostanie przetestowane przez małą grupę użytkowników i wszystkie problemy zostaną rozwiązane, możemy przeprowadzić pełny test A/B. Nie musi to być dokładnie 50% ruchu, ale powinna to być porównywalna liczba z losowo wybranym zestawem danych o użytkowaniu na żywo.

Zbieranie danych

Podczas testu zadbaj o to, aby rejestrować odpowiednie dane potwierdzające Twoją hipotezę. W tym procesie możesz używać platformy do testów A/B, aby ułatwić zbieranie danych i późniejszą analizę. Google Maps Platform zbiera też dane o używaniu interfejsów API, które mogą być przydatne. Więcej informacji o korzystaniu z naszych narzędzi do raportowania znajdziesz na tej stronie.

Oto kilka sugerowanych rodzajów danych:

Autouzupełnianie miejsc

Współczynnik konwersji: czy współczynnik konwersji/ukończenia formularza wzrósł w porównaniu z okresem, w którym nie było rozwiązania autouzupełniania?
Interakcja z narzędziem: czy więcej użytkowników korzysta z autouzupełniania miejsc w porównaniu z poprzednim rozwiązaniem?

Weryfikacja adresów

Skuteczność dostawy: czy nastąpił spadek liczby nieudanych dostaw z powodu jakości adresu?
Zmiany adresu: czy liczba opłat za zmianę adresu otrzymywanych od kurierów uległa zmniejszeniu?
Budynki mieszkalne a komercyjne: czy nastąpiła poprawa w zakresie zbierania danych o budynkach mieszkalnych i komercyjnych? (tylko wybrane rynki)

Analizuj

Test się zakończył. Teraz możesz przeanalizować wyniki pod kątem pierwotnych kryteriów testu i hipotezy. Jeśli do przeprowadzenia tego procesu używasz platformy do testów A/B, niektóre informacje mogą być już dostępne.

Wracając do sekcji dotyczącej zmniejszenia liczby adresów o niskiej jakości powyżej, możesz też używać innych danych, które nie zostały zarejestrowane przez platformę do testów A/B. Może to być odsetek nieudanych dostaw w różnych scenariuszach testowych, np. w przypadku takich danych:

Rozwiązanie A Rozwiązanie B
Nieudane dostawy 1,75% 1,23%

Na podstawie powyższego przykładu widać, że w tym przypadku lepszym wyborem będzie rozwiązanie B.

Podsumowanie

Mamy nadzieję, że ten przewodnik zawiera wystarczająco dużo informacji, aby pomóc Ci rozpocząć przygodę z testami A/B. Chociaż w tym artykule użyto przykładów z branży e-commerce, te same podstawowe zasady można stosować w każdej dziedzinie. Określ, jakie korzyści przynosi Twojej firmie dobra jakość danych adresowych, i śledź je jako główną hipotezę.

Poniżej ponownie umieściliśmy linki wspomniane w przewodniku, aby ułatwić Ci dalsze czytanie.

Miłego testowania,

Następne kroki

Pobierz białą księgę na temat usprawniania procesu płatności, dostawy i operacji dzięki wiarygodnym adresom i obejrzyj webinar na temat usprawniania procesu płatności, dostawy i operacji dzięki weryfikacji adresu .

Sugerowane dalsze lektury:

Współtwórcy

Główni autorzy:

Henrik Valve | Inżynier rozwiązań Google Maps Platform