Auswirkung der Adressbestätigung über A/B-Tests messen

In diesem Dokument werden Techniken beschrieben, die Sie bei der Durchführung eines A/B-Tests der Google Maps Platform APIs Place Autocomplete und Address Validation berücksichtigen sollten.

Die Place Autocomplete API und die Address Validation API bieten unter anderem folgende Vorteile:

  • Verbesserte Customer Experience:Wenn Sie Ihren Kunden Echtzeitvorschläge für Adressen und Orte anbieten, können Sie ihnen helfen, den Bezahlvorgang schneller und einfacher abzuschließen. Das kann zu einer besseren Customer Experience führen.
  • Höhere Datenpräzision:Mit den APIs Place Autocomplete und Address Validation können Sie die Genauigkeit Ihrer Kundendaten verbessern. Das ist besonders wichtig im E-Commerce, da genaue Adressdaten für die erfolgreiche Zustellung von Paketen erforderlich sind.

Um die Qualität Ihrer Adressen zu verbessern, können Sie einen A/B-Test durchführen, um herauszufinden, welche Validierungslösung am besten zu Ihren Anforderungen passt. So können Sie quantitativ entscheiden, welches Produkt am besten für Ihren Anwendungsfall geeignet ist.

Mit einem A/B-Test können Sie zwei Versionen einer Webseite oder App miteinander vergleichen. Es handelt sich um eine Art kontrollierten Test, mit dem die Auswirkungen einer Änderung einer Variablen auf ein messbares Ergebnis ermittelt werden.
Für einen A/B-Test erstellen Sie zwei Versionen einer Seite oder App: eine als Kontrollgruppe und eine mit der messbaren Änderung. Anschließend präsentieren Sie diese Versionen verschiedenen Nutzern und messen, wie sie damit interagieren. Die Version, die besser abschneidet, ist die Gewinnerversion.

Übersicht über die Systemarchitektur

Sehen wir uns A/B-Tests für die Adressvalidierung in einem E-Commerce-Anwendungsfall an. Das folgende Architekturdiagramm zeigt, wie ein Kunde mit Ihrer Commerce-Lösung interagiert. So können Sie die effektivere Validierungsstrategie ermitteln.

[Systemkontext] A/B-Tests für die Adressbestätigung

Die Systeme, die beim A/B-Test des Werts der Address Validation API beteiligt sind.

Das Architekturdiagramm zeigt einen Kunden, der mit dem A/B-Testsystem auf Ihrer E-Commerce-Website interagiert. Das System entscheidet, welche Testvariable dem Kunden angezeigt wird. Der Onlineshop ruft eine API des Google Maps Platform-Softwaresystems auf. Außerdem werden A/B-Testanalysen erfasst, die von einem Analysesoftwaresystem verarbeitet und an das A/B-Testsystem zurückgemeldet werden.

Ablauf von A/B-Tests

Der A/B-Testprozess lässt sich in vier Phasen unterteilen.

  • Vorbereitung: Testanforderungen, Umfang und Zeitrahmen festlegen.
  • Entwickeln: Implementieren Sie die Place Autocomplete API und die Address Validation API in einer Umgebung, in der der Test ausgeführt werden kann.
  • Ausführen: Messwerte werden während des Tests erfasst, bis signifikante Ergebnisse erzielt werden oder die Zeit abgelaufen ist.
  • Analysieren: Vergleichen Sie die Ergebnisse mit der Hypothese und ermitteln Sie die nächsten Schritte.

Wir gehen auf jeden dieser Punkte ein.

Zubereitung

Anforderungen für A/B-Tests festlegen

Erste Erkennung

Fragen Sie sich: Warum fügen Sie einen Anbieter für die Adressvalidierung hinzu oder ändern ihn? Beispiel für die Verwendung von Google Maps Places Autocomplete:

  • Zeit sparen:Sie müssen nicht den vollständigen Namen eines Orts eingeben, sondern können einfach mit der Eingabe beginnen und sich Vorschläge anzeigen lassen.
  • Weniger Fehler:Wenn Sie den Namen eines Orts falsch schreiben, schlägt die automatische Vervollständigung von Google Maps Places trotzdem den richtigen Ort vor.

Die Adressvalidierung bietet viele Vorteile:

  • Höhere Zustellraten:Durch die Adressvalidierung kann sichergestellt werden, dass Briefe und Pakete an die richtige Adresse gesendet werden. So können Unternehmen Zeit und Geld sparen und die Kundenzufriedenheit steigern.
  • Bessere Datenqualität:Durch die Adressvalidierung können Fehler in Adressen erkannt und korrigiert werden, wodurch die Datenqualität verbessert wird. So lässt sich die Genauigkeit von Marketingkampagnen und anderen datengesteuerten Initiativen verbessern.

Hypothese auswählen

Legen Sie fest, welche Hypothese Sie testen möchten. Hier sind zwei Beispiele:

1. Conversion-Rate

Wenn Sie eine Lösung für die automatische Vervollständigung hinzufügen, ist in der Regel ein leichter Anstieg der Conversion-Raten zu beobachten. Das ist ein guter Messwert, den Sie im Blick behalten sollten. Wenn Sie Ihre Type-Ahead-Lösung von einem anderen Anbieter ändern, ist eine pauschale Conversion-Rate zu erwarten. Wenn die Conversion-Rate sinkt, sollten Sie zuerst die Implementierung überprüfen.

Die Conversion-Rate ist wichtig, aber sie liefert möglicherweise nicht alle Informationen. Durch das Hinzufügen einer Lösung zur Adressvalidierung soll verhindert werden, dass Nutzer Adressen von schlechter Qualität eingeben. In einigen Fällen kann dies zu einer gewissen Reibung bei der Erfassung von Adressen führen. Das kann zu einem Rückgang der Conversion-Raten insgesamt führen, was aber nicht unbedingt schlecht sein muss. Die nicht abgeschlossenen Bestellungen aufgrund der Adressbestätigung waren möglicherweise mit Adressdaten von schlechter Qualität verknüpft, die zu Kosten für das Unternehmen durch Rückbuchungen von Liefergebühren geführt hätten.

2. Weniger Adressen mit schlechter Qualität

Hier kann eine gute Lösung zur Adressvalidierung wirklich glänzen. Durch die Implementierung der Address Validation API sollten Sie mit einer Reduzierung der Adressdaten von schlechter Qualität rechnen.

Wenn Sie eine neue Lösung mit einer vorhandenen vergleichen, ist es vielleicht verlockend, nur die Abgleichsraten für „gute Adressen“ zu vergleichen und den Dienst mit der höheren Abgleichsrate auszuwählen. Das kann irreführend sein, da ein Dienst möglicherweise mehr falsch positive Ergebnisse liefert als der andere.

Stattdessen ist es sinnvoller, das erfolgreiche Ergebnis der Verwendung der Adressdaten zu vergleichen. Im E-Commerce wäre das gewünschte Ergebnis der Erfassung einer Adresse die erfolgreiche Zustellung eines Pakets.

Build

Jetzt kommt der spannende Teil. Es ist an der Zeit, eine neue Lösung für Ihre Kunden zu entwickeln. Wir haben bereits eine praktische Anleitung für die Implementierung von Place Autocomplete und der Address Validation API an der Kasse eines Onlineshops. Wir empfehlen Ihnen, dies zu prüfen, während Sie diesen Schritt ausführen.

Auch wenn Sie nicht speziell für den E-Commerce entwickeln, sind viele der Informationen dennoch relevant, insbesondere die Anleitung zum Bestimmen der Adressqualität anhand der Ausgabe der Address Validation API.

Architekturdiagramm

Unten sehen Sie ein Beispiel für die Container, die zum Erstellen eines A/B-Tests in einer E-Commerce-Umgebung verwendet werden könnten:

[Ausführungsumgebung] A/B-Tests für die Adressvalidierung

Die wichtigen Anwendungen, Dienste und Datenspeicher in den wichtigsten Systemen, die die Architektur unterstützen. (Zum Vergrößern klicken)

Das Architekturdiagramm zeigt die Container, aus denen das A/B-Test-Softwaresystem und das E-Commerce-App-Softwaresystem bestehen. Ein Kunde interagiert auf Ihrer E-Commerce-Website mit einem Load-Balancer, der ihn zur App der E-Commerce-Website weiterleitet. Der A/B Test Manager kommuniziert mit dem Load-Balancer, um die A/B-Testvariable auszuwählen, die dem Kunden angezeigt werden soll. In diesem A/B-Testsystem werden die Ergebnisse und die Konfiguration des A/B-Tests auch in einer Datenbank Ihrer Wahl aufgezeichnet. Die E-Commerce-Web-App führt API-Aufrufe an das Google Maps Platform-Softwaresystem aus und meldet auch Analyseereignisse an das Analytics-Softwaresystem, das die Testereignisse in der Datenbank mit A/B-Testergebnissen aufzeichnet.

Implementierung validieren

Eine schlecht implementierte Lösung führt zu unzuverlässigen Testergebnissen. Bevor Sie den A/B-Test durchführen, sollten Sie die Lösung zuerst mit einer kleinen Nutzergruppe testen, um sicherzugehen, dass sie wie erwartet funktioniert. Das können interne QS-Tester und/oder eine ausgewählte Gruppe externer Tester sein, denen Sie konstruktives Feedback zutrauen.

Ausführen

Langsam steigern

Auch wenn die Lösung validiert wurde, ist es ratsam, den Test langsam zu starten, indem Sie ihn zuerst mit einer kleinen Gruppe von Nutzern durchführen. So können Fehler oder andere Probleme frühzeitig erkannt und schnell behoben werden, ohne dass ein großer Prozentsatz Ihrer Nutzer betroffen ist.

Vollständiger Test

Sobald die Lösung von einer kleinen Gruppe von Nutzern getestet wurde und alle Probleme behoben sind, können wir einen vollständigen A/B-Test durchführen. Das muss nicht unbedingt eine 50/50-Aufteilung des Traffics sein, sollte aber in der Größe mit einer zufällig ausgewählten Gruppe von Live-Nutzern vergleichbar sein.

Messwerte erfassen

Während des Tests sollten Sie dafür sorgen, dass geeignete Daten zur Untermauerung Ihrer Hypothese erfasst werden. Sie können während dieses Prozesses eine A/B-Testplattform verwenden, um die Datenerhebung und spätere Analyse zu vereinfachen. In der Google Maps Platform werden auch API-Nutzungsmesswerte erfasst, die nützlich sein können. Weitere Informationen zur Verwendung unserer Berichterstellungstools

Hier einige Vorschläge für Messwerte:

Place Autocomplete

Conversion-Rate:Hat sich die Conversion-Rate Ihres Formulars verbessert, seit Sie eine Lösung zur automatischen Vervollständigung verwenden?
Tool-Interaktion:Interagieren mehr Nutzer erfolgreich mit Place Autocomplete als mit der vorherigen Lösung?

Address Validation

Zustellungserfolg:Gab es weniger fehlgeschlagene Zustellungen aufgrund der Adressqualität?
Adressänderungen:Hat sich die Anzahl der Gebühren für Adressänderungen, die Sie von Kurieren erhalten haben, verringert?
Privat vs. gewerblich:Hat sich die Erfassung von Daten zu privaten und gewerblichen Standorten verbessert? (nur ausgewählte Märkte)

Analysieren

Nachdem der Test abgeschlossen ist, ist es an der Zeit, die Ergebnisse anhand der ursprünglichen Testkriterien und Hypothese zu analysieren. Wenn Sie eine A/B-Testplattform verwendet haben, sind einige Informationen möglicherweise bereits verfügbar.

Wenn Sie zum Abschnitt „Reduzierung von Adressen mit schlechter Qualität“ oben zurückkehren, können Sie auch andere Messwerte verwenden, die möglicherweise nicht von der A/B-Testplattform erfasst wurden. Das könnte die Rate der fehlgeschlagenen Zustellungen zwischen den Testszenarien sein, mit Beispieldaten wie diesen:

Lösung A Lösung B
Fehlgeschlagene Zustellungen 1,75% 1,23%

Wenn wir uns das obige Beispiel ansehen, ist klar, dass Lösung B für diesen Anwendungsfall die bessere Wahl wäre.

Fazit

Wir hoffen, dass Sie in diesem Leitfaden genügend Informationen für den Einstieg in A/B-Tests finden. In diesem Artikel werden zwar Beispiele aus dem E-Commerce verwendet, die grundlegenden Prinzipien lassen sich jedoch auf alle Bereiche anwenden. Stellen Sie fest, welche positiven Auswirkungen hochwertige Adressdaten auf Ihr Unternehmen haben, und verfolgen Sie diese als Ihre Haupthypothese.

Unten finden Sie noch einmal die im Leitfaden erwähnten Links als weiterführende Informationen.

Mit freundlichen Grüßen

Nächste Schritte

Laden Sie das Whitepaper zum Optimieren von Bezahlvorgang, Lieferung und Betrieb mit gültigen Adressen herunter und sehen Sie sich das Webinar zum Optimieren von Bezahlvorgang, Lieferung und Betrieb mit Address Validation an.

Empfohlene Artikel:

Beitragende

Hauptautoren:

Henrik Valve | Google Maps Platform Solutions Engineer