Pengujian A/B validasi alamat

Dokumen ini menjelaskan teknik yang perlu dipertimbangkan saat melakukan pengujian A/B untuk API Place Autocomplete dan Address Validation Google Maps Platform.

Beberapa manfaat menggunakan Place Autocomplete dan Address Validation API adalah sebagai berikut:

  • Pengalaman pelanggan yang lebih baik: Dengan memberikan saran alamat dan tempat secara real-time kepada pelanggan, Anda dapat membantu mereka menyelesaikan checkout dengan lebih cepat dan mudah. Hal ini dapat meningkatkan pengalaman pelanggan.
  • Peningkatan akurasi data: Place Autocomplete dan Address Validation API dapat membantu Anda meningkatkan akurasi data pelanggan. Hal ini sangat penting dalam e-commerce, karena data alamat yang akurat diperlukan untuk keberhasilan pengiriman paket.

Untuk meningkatkan kualitas alamat, jalankan pengujian A/B untuk mengevaluasi solusi validasi mana yang paling sesuai dengan kebutuhan Anda. Hal ini memberi Anda kesempatan untuk memutuskan secara kuantitatif produk mana yang paling cocok untuk kasus penggunaan Anda.

Pengujian A/B adalah cara untuk membandingkan dua versi halaman web atau aplikasi satu sama lain. Pengujian ini adalah jenis eksperimen terkontrol yang digunakan untuk menentukan efek perubahan pada variabel terhadap hasil yang dapat diukur.
Untuk melakukan pengujian A/B, buat dua versi halaman atau aplikasi, satu sebagai kontrol dan satu lagi dengan perubahan yang dapat diukur. Kemudian, Anda menampilkan versi ini kepada pengguna yang berbeda dan mengukur cara mereka berinteraksi dengan versi tersebut. Versi yang berperforma lebih baik adalah pemenangnya.

Ringkasan Arsitektur Sistem

Mari kita lihat pengujian A/B Address Validation dalam kasus penggunaan e-commerce. Diagram arsitektur di bawah menunjukkan cara pelanggan berinteraksi dengan pengalaman perdagangan Anda, sehingga Anda dapat menentukan strategi validasi yang lebih efektif.

[System Context] A/B Testing Address Validation

Sistem yang terlibat saat melakukan pengujian A/B terhadap nilai Address Validation API.

Diagram arsitektur menunjukkan pelanggan ke situs e-commerce Anda yang berinteraksi dengan Sistem Pengujian A/B. Sistem ini membuat keputusan tentang variabel pengujian mana yang akan ditampilkan kepada pelanggan, dari sistem software toko e-commerce. Toko e-commerce melakukan panggilan API ke sistem software Google Maps Platform. Sistem ini juga mengumpulkan analisis pengujian A/B, yang diproses oleh sistem software analisis, dan dilaporkan kembali ke sistem pengujian A/B.

Proses pengujian A/B

Saat Anda memikirkan keseluruhan proses pengujian A/B, ada empat tahap yang perlu dipertimbangkan.

  • Persiapan - Identifikasi persyaratan, cakupan, dan jangka waktu pengujian.
  • Build - Terapkan Place Autocomplete dan Address Validation API di lingkungan untuk menjalankan pengujian.
  • Jalankan - Kumpulkan metrik saat pengujian berjalan, hingga hasil yang signifikan diperoleh atau waktu habis.
  • Analisis - Bandingkan hasilnya dengan hipotesis dan identifikasi langkah berikutnya.

Kita akan membahasnya satu per satu.

Persiapan

Menentukan persyaratan pengujian A/B

Penemuan awal

Tanyakan kepada diri Anda: Mengapa Anda menambahkan atau mengubah penyedia validasi alamat? Misalnya, menggunakan Place Autocomplete Google Maps:

  • Menghemat waktu: Anda tidak perlu mengetik seluruh nama tempat jika Anda dapat mulai mengetik dan melihat saran muncul.
  • Mengurangi error: Jika Anda salah mengeja nama tempat, Autocomplete Tempat Google Maps akan tetap menyarankan tempat yang benar.

Ada banyak manfaat validasi alamat, termasuk:

  • Meningkatkan rasio pengiriman: Validasi alamat dapat membantu meningkatkan rasio pengiriman dengan memastikan bahwa surat dan paket dikirim ke alamat yang benar. Hal ini dapat menghemat waktu dan biaya bisnis, serta meningkatkan kepuasan pelanggan.
  • Kualitas data yang lebih baik: Validasi alamat dapat membantu meningkatkan kualitas data dengan mengidentifikasi dan memperbaiki error pada alamat. Hal ini dapat meningkatkan akurasi kampanye pemasaran dan inisiatif berbasis data lainnya.

Menentukan hipotesis

Tentukan hipotesis yang akan diuji. Berikut dua contohnya:

1. Rasio konversi

Saat Anda menambahkan solusi pelengkapan otomatis, biasanya akan ada sedikit peningkatan rasio konversi, dan ini adalah metrik yang baik untuk dilacak. Jika Anda mengubah solusi pelengkapan otomatis dari penyedia lain, rasio konversi yang tetap harus diperkirakan. Jika rasio konversi turun, hal pertama yang harus diperiksa adalah penerapannya.

Rasio konversi memang penting, tetapi mungkin tidak memberikan gambaran lengkap. Penambahan solusi Address Validation dirancang untuk mencegah orang mengirimkan alamat berkualitas buruk di titik entri, dan dapat menambahkan beberapa hambatan alami pada pengambilan alamat dalam beberapa skenario. Hal ini dapat menyebabkan penurunan rasio konversi secara keseluruhan, tetapi tidak selalu dianggap sebagai hal yang buruk. Pesanan yang tidak selesai karena penambahan validasi alamat mungkin terkait dengan data alamat berkualitas buruk yang akan mengakibatkan biaya bagi bisnis melalui penagihan balik pengiriman.

2. Pengurangan alamat berkualitas buruk

Di sinilah solusi validasi alamat yang baik dapat benar-benar membantu. Dengan menerapkan Address Validation, Anda akan melihat pengurangan data alamat yang berkualitas buruk.

Jika Anda membandingkan solusi baru dengan solusi yang sudah ada, Anda mungkin tergoda untuk hanya membandingkan rasio kecocokan 'alamat yang baik', dan memilih layanan yang memberikan rasio kecocokan yang lebih tinggi. Hal ini dapat menyesatkan karena satu layanan mungkin memberikan lebih banyak positif palsu daripada layanan lainnya.

Sebaliknya, metrik yang lebih berdampak adalah membandingkan hasil yang berhasil dari penggunaan data alamat. Mengambil e-commerce sebagai contoh, hasil yang diinginkan dari pengambilan alamat adalah pengiriman paket yang berhasil.

Build

Sekarang, saatnya bagian yang menarik. Saatnya membangun solusi baru untuk pelanggan Anda. Kami sudah memiliki panduan praktis untuk menerapkan Place Autocomplete dan Address Validation API di checkout e-commerce. Sebaiknya Anda memeriksanya saat menyelesaikan langkah ini.

Meskipun Anda tidak membangun khusus untuk e-commerce, banyak informasi yang masih relevan, terutama panduan tentang cara menentukan kualitas alamat dari output Address Validation API.

Diagram Arsitektur

Berikut adalah contoh penampung yang dapat digunakan untuk membuat pengujian A/B di lingkungan e-commerce:

[Execution Environment] A/B Testing Address Validation

Aplikasi, layanan, dan penyimpanan data penting, dalam sistem utama, yang mendukung arsitektur. (Klik untuk memperbesar.)

Diagram arsitektur menunjukkan container yang membentuk Sistem Software Pengujian A/B, dan Sistem Software Aplikasi E-commerce. Diagram ini menunjukkan pelanggan ke situs e-commerce Anda yang berinteraksi dengan Load Balancer, yang akan mengarahkannya ke aplikasi situs e-commerce. Pengelola Pengujian A/B berkomunikasi dengan load balancer, untuk memilih variabel pengujian A/B yang akan ditampilkan kepada pelanggan. Sistem pengujian A/B ini juga mencatat hasil dan konfigurasi pengujian A/B dalam database pilihan Anda. Aplikasi Web E-commerce melakukan panggilan API ke Sistem Software Google Maps Platform, dan juga melaporkan peristiwa analisis ke sistem software Analytics, yang mencatat peristiwa pengujian ke database hasil pengujian A/B.

Memvalidasi penerapan

Solusi yang diterapkan dengan buruk akan menghasilkan hasil pengujian yang tidak dapat diandalkan. Sebelum menjalankan pengujian A/B, penting untuk memvalidasi solusi terlebih dahulu dengan grup pengguna kecil untuk memastikan solusi berfungsi seperti yang diharapkan. Penguji ini dapat berupa penguji QA internal, dan/atau sekelompok penguji eksternal terpilih, yang Anda percayai untuk memberikan masukan yang konstruktif.

Jalankan

Meningkatkan secara perlahan

Meskipun solusi telah divalidasi, sebaiknya tingkatkan pengujian secara perlahan, dimulai dengan sekelompok kecil pengguna. Dengan melakukan ini, bug atau masalah lainnya dapat diketahui lebih awal dan diatasi dengan cepat tanpa memengaruhi sebagian besar pengguna Anda.

Pengujian lengkap

Setelah solusi diuji oleh sekelompok kecil pengguna dan masalah apa pun telah diatasi, kita dapat meningkatkan pengujian ke pengujian A/B penuh. Pemisahan ini tidak harus berupa pemisahan traffic 50/50 yang sebenarnya, tetapi harus sebanding dalam ukuran dengan kumpulan penggunaan langsung yang dipilih secara acak.

Merekam Metrik

Selama pengujian, Anda harus memastikan bahwa data yang sesuai untuk mendukung hipotesis Anda dicatat. Anda dapat menggunakan platform pengujian A/B selama proses ini, untuk memudahkan pengumpulan data, dan analisis selanjutnya. Google Maps Platform juga mengumpulkan metrik penggunaan API yang mungkin berguna. Anda dapat membuka halaman ini untuk mempelajari lebih lanjut cara menggunakan alat pelaporan kami.

Beberapa metrik yang disarankan adalah sebagai berikut:

Place Autocomplete

Rasio konversi: Apakah rasio konversi/penyelesaian formulir Anda meningkat dibandingkan saat belum menggunakan solusi pelengkapan otomatis?
Interaksi alat: Apakah lebih banyak pengguna yang berhasil berinteraksi dengan Place Autocomplete dibandingkan dengan solusi sebelumnya?

Address Validation

Keberhasilan pengiriman: Apakah ada pengurangan pengiriman yang gagal karena kualitas alamat?
Perubahan alamat: Apakah ada pengurangan jumlah biaya perubahan alamat yang Anda terima dari kurir?
Residensial vs komersial: Apakah ada peningkatan dalam pengambilan data residensial vs komersial? (khusus pasar tertentu)

Analisis

Setelah pengujian selesai, saatnya menganalisis hasilnya berdasarkan kriteria dan hipotesis pengujian awal. Jika Anda menggunakan platform pengujian A/B untuk menyelesaikan prosesnya, beberapa informasi mungkin sudah tersedia untuk Anda.

Kembali ke bagian Pengurangan alamat berkualitas buruk di atas, Anda juga dapat menggunakan metrik lain yang mungkin tidak dicatat oleh platform pengujian A/B. Hal ini dapat berupa tingkat pengiriman yang gagal di antara skenario pengujian, dengan contoh data seperti ini:

Solusi A Solusi B
Pengiriman gagal 1,75% 1,23%

Melihat contoh dasar di atas, jelas bahwa untuk kasus penggunaan ini, Solusi B akan menjadi pilihan yang lebih baik.

Kesimpulan

Semoga panduan ini telah memberi Anda informasi yang cukup untuk memulai perjalanan pengujian A/B. Meskipun menggunakan contoh dari bidang e-commerce, prinsip dasar yang sama dapat diterapkan secara menyeluruh. Tentukan hasil yang sukses dari memiliki data alamat berkualitas baik dalam bisnis Anda, dan lacak hal tersebut sebagai hipotesis utama Anda.

Kami telah menyertakan link yang disebutkan dalam panduan lagi di bawah, sebagai bacaan lanjutan yang disarankan.

Selamat mencoba!

Langkah Berikutnya

Download Laporan resmi Meningkatkan kualitas checkout, pengiriman, dan operasi dengan alamat yang andal dan tonton Webinar Meningkatkan kualitas checkout, pengiriman, dan operasi dengan Validasi Alamat .

Bacaan lebih lanjut yang disarankan:

Kontributor

Penulis utama:

Henrik Valve | Google Maps Platform Solutions Engineer