A/B-Tests für die Adressbestätigung

In diesem Dokument werden Techniken beschrieben, die Sie bei der Durchführung eines A/B-Tests der Google Maps Platform APIs Place Autocomplete und Address Validation berücksichtigen sollten.

Die Verwendung von Place Autocomplete und der Address Validation API bietet unter anderem folgende Vorteile:

  • Verbesserte Nutzerfreundlichkeit: Wenn Sie Ihren Kunden Echtzeitvorschläge für Adressen und Orte machen, können sie den Bezahlvorgang schneller und einfacher abschließen. Das kann zu einer besseren Kundenzufriedenheit führen.
  • Verbesserte Datengenauigkeit: Mit Place Autocomplete und der Address Validation API können Sie die Genauigkeit Ihrer Kundendaten verbessern. Das ist besonders im E-Commerce wichtig, da genaue Adressdaten für die erfolgreiche Zustellung von Paketen erforderlich sind.

Wenn Sie die Qualität Ihrer Adressen verbessern möchten, können Sie einen A/B-Test durchführen, um herauszufinden, welche Validierungslösung am besten zu Ihren Anforderungen passt. So können Sie quantitativ entscheiden, welches Produkt für Ihren Anwendungsfall am besten geeignet ist.

Mit einem A/B-Test können Sie zwei Versionen einer Webseite oder App miteinander vergleichen. Es handelt sich um eine Art kontrollierten Test, mit dem die Auswirkungen einer Änderung an einer Variablen auf ein messbares Ergebnis ermittelt werden.
Für einen A/B-Test erstellen Sie zwei Versionen einer Seite oder App – eine als Kontrollgruppe und eine mit der messbaren Änderung. Diese Versionen werden dann verschiedenen Nutzern präsentiert, um zu messen, wie sie damit interagieren. Die Version, die besser abschneidet, ist der Gewinner.

Systemarchitektur – Übersicht

Sehen wir uns einen A/B-Test für die Adressvalidierung in einem E-Commerce-Anwendungsfall an. Das folgende Architekturdiagramm zeigt, wie ein Kunde mit Ihrem Commerce-Angebot interagiert. So können Sie die effektivste Validierungsstrategie bestimmen.

[System Context] A/B Testing Address Validation

Die Systeme, die beim A/B-Testen des Werts der Address Validation API beteiligt sind.

Das Architekturdiagramm zeigt einen Kunden Ihrer E-Commerce-Website, der mit dem A/B-Testsystem interagiert. Dieses System entscheidet, welche Testvariable dem Kunden angezeigt wird, und zwar über das Softwaresystem des E-Commerce-Shops. Der E-Commerce-Shop sendet einen API-Aufruf an das Softwaresystem der Google Maps Platform. Außerdem werden A/B-Testanalysen erfasst, die von einem Analysesystem verarbeitet und an das A/B-Testsystem zurückgemeldet werden.

Der A/B-Testprozess

Der gesamte A/B-Testprozess umfasst vier Phasen.

  • Vorbereitung: Testanforderungen, Umfang und Zeitrahmen festlegen.
  • Erstellen: Implementieren Sie die Place Autocomplete API und die Address Validation API in einer Umgebung, in der der Test ausgeführt werden soll.
  • Ausführen: Messwerte werden erfasst, während der Test läuft, bis signifikante Ergebnisse vorliegen oder die Zeit abgelaufen ist.
  • Analysieren: Vergleichen Sie die Ergebnisse mit der Hypothese und legen Sie die nächsten Schritte fest.

Wir werden auf jeden dieser Punkte eingehen.

Zubereitung

Anforderungen für A/B-Tests festlegen

Erste Erkennung

Fragen Sie sich: Warum fügen Sie einen Anbieter für die Adressvalidierung hinzu oder ändern ihn? Beispiel mit der automatischen Vervollständigung von Google Maps Places:

  • Zeitersparnis: Sie müssen nicht den gesamten Namen eines Ortes eingeben, sondern können einfach mit der Eingabe beginnen und Vorschläge sehen.
  • Weniger Fehler: Wenn Sie den Namen eines Ortes falsch schreiben, schlägt Google Maps Place Autocomplete trotzdem den richtigen Ort vor.

Die Adressvalidierung bietet viele Vorteile, darunter:

  • Höhere Zustellraten: Mit der Address Validation können Sie die Zustellraten verbessern, da Post und Pakete an die richtige Adresse gesendet werden. So können Unternehmen Zeit und Geld sparen und die Kundenzufriedenheit verbessern.
  • Verbesserte Datenqualität: Mit der Address Validation können Fehler in Adressen erkannt und korrigiert werden, was die Datenqualität verbessert. Dadurch lässt sich die Genauigkeit von Marketingkampagnen und anderen datengestützten Initiativen verbessern.

Hypothese festlegen

Entscheiden Sie, welche Hypothese Sie testen möchten. Hier sind zwei Beispiele:

1. Conversion-Rate

Wenn Sie eine Type-Ahead-Lösung hinzufügen, ist es üblich, dass die Conversion-Raten leicht steigen. Dies ist ein guter Messwert, den Sie im Auge behalten sollten. Wenn Sie von einem anderen Anbieter zu einer Type-Ahead-Lösung wechseln, ist mit einer gleichbleibenden Conversion-Rate zu rechnen. Wenn die Conversion-Rate sinkt, sollten Sie zuerst die Implementierung überprüfen.

Die Conversion-Rate ist wichtig, aber sie ist nicht der einzige entscheidende Faktor. Mit einer Address Validation-Lösung soll verhindert werden, dass Nutzer bei der Eingabe fehlerhafte Adressen angeben. In einigen Szenarien kann dies die Adresserfassung etwas erschweren. Das kann zu einem Rückgang der Gesamt-Conversion-Raten führen, was aber nicht unbedingt negativ ist. Die nicht abgeschlossenen Bestellungen aufgrund der zusätzlichen Address Validation könnten mit Adressdaten von schlechter Qualität zusammenhängen, die dem Unternehmen durch Rückbuchungen von Lieferkosten Kosten verursacht hätten.

2. Weniger Adressen mit schlechter Qualität

Hier kann eine gute Lösung zur Adressvalidierung wirklich glänzen. Durch die Implementierung von Address Validation sollten Sie eine Reduzierung von Adressdaten von schlechter Qualität feststellen.

Wenn Sie eine neue Lösung mit einer vorhandenen vergleichen, ist es verlockend, nur die Übereinstimmungsraten für „gute Adressen“ zu vergleichen und den Dienst mit der höheren Übereinstimmungsrate auszuwählen. Das kann irreführend sein, da ein Dienst möglicherweise mehr falsch positive Ergebnisse liefert als der andere.

Viel aussagekräftiger ist es, die erfolgreichen Ergebnisse der Verwendung der Adressdaten zu vergleichen. Im E-Commerce ist das gewünschte Ergebnis der Erfassung einer Adresse die erfolgreiche Zustellung eines Pakets.

Build

Jetzt kommt der spannende Teil! Es ist an der Zeit, eine neue Lösung für Ihre Kunden zu entwickeln. Wir haben bereits einen praktischen Leitfaden zur Implementierung von Place Autocomplete und der Address Validation API für den Bezahlvorgang im E-Commerce veröffentlicht. Wir empfehlen Ihnen, sich diese Informationen anzusehen, während Sie diesen Schritt ausführen.

Auch wenn Sie nicht speziell für den E-Commerce entwickeln, sind viele der Informationen relevant, insbesondere die Anleitung zur Bestimmung der Adressqualität anhand der Ausgabe der Address Validation API.

Architekturdiagramm

Im Folgenden finden Sie ein Beispiel für die Container, die zum Erstellen eines A/B-Tests in einer E-Commerce-Umgebung verwendet werden könnten:

[Ausführungsumgebung] A/B-Tests für die Adressvalidierung

Die wichtigen Anwendungen, Dienste und Datenspeicher in den Schlüsselsystemen, die die Architektur unterstützen. (Zum Vergrößern klicken)

Das Architekturdiagramm zeigt die Container, aus denen das A/B-Test-Softwaresystem und das E-Commerce-App-Softwaresystem bestehen. Es zeigt einen Kunden auf Ihrer E-Commerce-Website, der mit einem Load Balancer interagiert, der ihn zur E-Commerce-Website-App weiterleitet. Der A/B-Testmanager kommuniziert mit dem Load Balancer, um die A/B-Testvariable auszuwählen, die dem Kunden angezeigt werden soll. Dieses A/B-Testsystem zeichnet die Ergebnisse und die Konfiguration des A/B-Tests auch in einer Datenbank Ihrer Wahl auf. Die E-Commerce-Webanwendung führt API-Aufrufe an das Google Maps Platform-Softwaresystem durch und meldet außerdem Analyseereignisse an das Analytics-Softwaresystem, das die Testereignisse in der Datenbank für A/B-Testergebnisse aufzeichnet.

Implementierung validieren

Eine schlecht implementierte Lösung führt zu unzuverlässigen Testergebnissen. Bevor Sie den A/B-Test durchführen, sollten Sie die Lösung zuerst mit einer kleinen Nutzergruppe validieren, um sicherzustellen, dass sie wie erwartet funktioniert. Das können interne QA-Tester und/oder eine ausgewählte Gruppe externer Tester sein, denen Sie vertrauen, dass sie konstruktives Feedback geben.

Ausführen

Langsam steigern

Auch wenn die Lösung validiert wurde, ist es sinnvoll, den Test langsam zu steigern und mit einer kleinen Gruppe von Nutzern zu beginnen. So können Fehler oder andere Probleme frühzeitig erkannt und schnell behoben werden, ohne dass ein großer Teil Ihrer Nutzer davon betroffen ist.

Vollständiger Test

Nachdem die Lösung von einer kleinen Gruppe von Nutzern getestet und alle Probleme behoben wurden, können wir einen vollständigen A/B-Test durchführen. Es muss sich nicht unbedingt um eine echte 50/50-Aufteilung des Traffics handeln, aber die Größe sollte mit einer zufällig ausgewählten Gruppe von Live-Nutzern vergleichbar sein.

Messwerte erfassen

Während des Tests sollten Sie darauf achten, dass geeignete Daten zur Untermauerung Ihrer Hypothese erfasst werden. Sie können während dieses Prozesses eine A/B-Testplattform verwenden, um die Datenerhebung und die spätere Analyse zu vereinfachen. Die Google Maps Platform erfasst auch API-Nutzungsmesswerte, die nützlich sein können. Auf dieser Seite finden Sie weitere Informationen zur Verwendung unserer Berichtstools.

Hier einige Vorschläge für Messwerte:

Place Autocomplete

Conversion-Rate: Hat sich die Conversion-/Abschlussrate Ihres Formulars im Vergleich zu vorher verbessert, als Sie noch keine Lösung für die automatische Vervollständigung hatten?
Tool-Interaktion: Interagieren mehr Nutzer erfolgreich mit Place Autocomplete als mit der vorherigen Lösung?

Address Validation

Erfolgreiche Zustellung: Gibt es weniger fehlgeschlagene Zustellungen aufgrund der Adressqualität?
Adressänderungen: Ist die Anzahl der Gebühren für Adressänderungen, die Sie von Kurieren erhalten haben, zurückgegangen?
Wohn- und Gewerbegebiete: Wurden Verbesserungen bei der Erfassung von Daten zu Wohn- und Gewerbegebieten vorgenommen? (nur in ausgewählten Märkten)

Analysieren

Nachdem der Test abgeschlossen ist, müssen die Ergebnisse anhand der ursprünglichen Testkriterien und der Hypothese analysiert werden. Wenn Sie eine A/B-Testplattform verwendet haben, sind einige Informationen möglicherweise bereits verfügbar.

Wie im Abschnitt Reduzierung von Adressen mit schlechter Qualität oben beschrieben, können Sie auch andere Messwerte verwenden, die möglicherweise nicht von der A/B-Testplattform erfasst wurden. Das könnte die Rate fehlgeschlagener Lieferungen zwischen den Testszenarien sein, mit Beispieldaten wie diesen:

Lösung A Lösung B
Fehlgeschlagene Zustellungen 1,75 % 1,23 %

Anhand des obigen Beispiels wird deutlich, dass für diesen Anwendungsfall Lösung B die bessere Wahl wäre.

Fazit

Wir hoffen, dass dieser Leitfaden Ihnen genügend Informationen für den Einstieg in A/B-Tests bietet. Die Beispiele stammen zwar aus dem E-Commerce-Bereich, die grundlegenden Prinzipien lassen sich jedoch auf alle Bereiche anwenden. Ermitteln Sie, welche positiven Auswirkungen hochwertige Adressdaten auf Ihr Unternehmen haben, und verfolgen Sie diese als Ihre Haupthypothese.

Unten finden Sie die im Leitfaden erwähnten Links noch einmal als weiterführende Informationen.

Mit freundlichen Grüßen

Nächste Schritte

Laden Sie das Whitepaper Improve checkout, delivery, and operations with reliable addresses herunter und sehen Sie sich das Webinar Improving checkout, delivery, and operations with Address Validation an.

Empfohlene weitere Informationen:

Beitragende

Hauptautoren:

Henrik Valve | Google Maps Platform Solutions Engineer