Uji A/B Landing Page: Kesalahan yang Membuat Hasil Menyesatkan

Landing page Anda mengubah 3 dari 100 pengunjung menjadi prospek. Anda mengganti judul, menunggu seminggu, konversi naik ke 4 persen, lalu seluruh halaman diganti ke versi baru. Tiga minggu kemudian angka itu kembali ke 3 persen dan tidak ada yang tahu mengapa. Kejadian seperti ini umum terjadi bukan karena A/B testing tidak berguna, melainkan karena cara menjalankannya membuat hasilnya tidak bisa dipercaya.

Uji A/B yang rapi bukan soal keberanian mengganti desain, melainkan soal disiplin metodologi. Berikut kesalahan yang paling sering muncul dan cara memperbaikinya.

Tentukan Satu Metrik Utama Sebelum Tes Dimulai

Masalah pertama biasanya muncul di ruang rapat, bukan di halaman web. Tim menetapkan lima metrik sekaligus: jumlah pendaftar, waktu di halaman, tingkat bounce, klik tombol, dan kualitas prospek. Ketika tes selesai, satu metrik naik, satu metrik turun, dan diskusi berubah menjadi adu selera.

Solusinya sederhana: pilih satu metrik utama yang paling dekat dengan tujuan bisnis, misalnya jumlah formulir terkirim yang lolos validasi. Metrik lain boleh dicatat sebagai pendamping, tetapi keputusan menang atau kalah hanya ditentukan oleh metrik utama tersebut. Tanpa aturan ini, tim akan cenderung memilih angka yang mendukung pendapat yang sudah dipegang sejak awal.

Ukuran Sampel: Bahaya Berhenti Terlalu Cepat

Kesalahan kedua adalah menghentikan tes begitu salah satu varian terlihat unggul. Misalnya pada hari ketiga varian B unggul 15 persen, lalu tes dihentikan dan varian B dipakai permanen. Padahal selisih itu bisa jadi hanya kebetulan dari segelintir pengunjung.

Sebagai gambaran, jika konversi dasar halaman Anda sekitar 3 persen dan Anda ingin mendeteksi kenaikan relatif sekitar 20 persen, Anda umumnya membutuhkan ribuan kunjungan per varian agar hasilnya cukup meyakinkan. Kalau traffic organik Anda hanya 200 kunjungan per hari, satu tes bisa memakan waktu beberapa minggu. Ini bukan alasan untuk berhenti menguji, melainkan alasan untuk memilih hipotesis yang dampaknya cukup besar, bukan sekadar mengganti warna tombol.

Cara praktisnya: tentukan durasi minimum dan target jumlah kunjungan sebelum tes dimulai, lalu tuliskan keduanya di dokumen yang bisa dilihat seluruh tim. Aturan yang disepakati di awal jauh lebih kuat daripada kesepakatan yang dibuat setelah melihat hasil.

Jangan Mengubah Banyak Elemen Sekaligus

Ada dua pendekatan yang sah, dan keduanya sering tertukar. Pendekatan pertama adalah menguji satu perubahan spesifik, misalnya hanya judul, agar Anda tahu persis elemen mana yang berpengaruh. Pendekatan kedua adalah menguji dua versi halaman yang benar-benar berbeda sebagai satu paket, biasanya untuk menguji konsep besar.

Yang berbahaya adalah campuran keduanya: Anda mengganti judul, gambar utama, dan teks tombol sekaligus, lalu menyimpulkan bahwa judul baru adalah penyebab kenaikan konversi. Kesimpulan itu tidak punya dasar. Jika tujuan Anda belajar, ujilah satu variabel. Jika tujuan Anda memilih konsep, ujilah paket lengkap dan sadari bahwa Anda tidak akan tahu elemen mana yang berperan.

Waspadai Sumber Traffic dan Waktu Pengujian

Hasil tes sangat dipengaruhi oleh siapa yang datang ke halaman Anda. Pengunjung dari iklan berbayar biasanya punya niat yang berbeda dari pengunjung organik, sehingga varian yang menang untuk satu sumber belum tentu menang untuk sumber lain. Sebelum menyimpulkan, periksa apakah komposisi sumber traffic pada kedua varian seimbang.

Hal serupa berlaku untuk waktu. Tes yang berjalan tiga hari di awal bulan bisa menghasilkan gambaran berbeda dari tes yang berjalan dua minggu penuh. Siklus anggaran, hari kerja, dan akhir pekan dapat mengubah perilaku pengunjung. Menjalankan tes minimal satu siklus minggu penuh membantu mengurangi bias ini, meskipun tidak menghilangkannya sepenuhnya.

Setelah Varian Menang, Dokumentasikan dan Uji Lagi

Kemenangan satu tes bukan akhir dari pekerjaan. Tuliskan hipotesis awal, perubahan yang diuji, jumlah kunjungan, metrik utama, dan konteks waktu pengujian. Dokumentasi ini menjadi aset yang jauh lebih berharga daripada file desain, karena ia menjelaskan mengapa sebuah keputusan diambil.

Yang juga penting: jangan langsung menggeneralisasi hasil ke semua halaman. Judul yang berhasil di halaman pendaftaran belum tentu berhasil di halaman harga, karena audiens dan niatnya berbeda. Perlakukan setiap temuan sebagai hipotesis baru untuk diuji di konteks lain, bukan sebagai kebenaran universal.

Sebagai penutup, ada satu kebiasaan kecil yang berdampak besar: sebelum menjalankan tes, tuliskan dalam satu paragraf apa yang Anda harapkan terjadi dan mengapa. Jika paragraf itu tidak bisa menjelaskan alasan di balik perubahan, kemungkinan besar tes tersebut hanya akan menghasilkan angka tanpa pemahaman. Uji A/B yang baik bukan tentang menang atau kalah, melainkan tentang mengurangi tebakan satu per satu sampai keputusan pemasaran Anda berdiri di atas bukti, bukan opini.