7 Kesalahan Pengujian A/B yang Harus Anda Hindari

Tes A/B adalah alat terbaik untuk meningkatkan tingkat konversi situs mana pun (penjualan, langganan, atau tindakan lain apa pun yang mungkin Anda minati). Setelah membuat dua atau lebih versi halaman atau posting apa pun di situs web Anda, Anda dapat mengetahui dengan data dan bukan asumsi, mana yang paling berhasil.

Tetapi sementara teorinya baik-baik saja, hati-hati dengan praktiknya. Sebelum Anda mulai melakukan pengujian A/B pada halaman Anda, pastikan Anda tidak membuat kesalahan yang dapat mengarah pada hasil yang ilusi. Itu mungkin berakhir dengan pemborosan uang dan waktu yang harus Anda hindari dengan cara apa pun.

Mari kita lihat kesalahan apa yang harus Anda hindari saat membuat pengujian A/B…

#1 Membandingkan Periode Waktu Yang Berbeda

Anda mungkin tergoda untuk menganalisis secara rinci perilaku dan konversi pengunjung Anda di halaman mana pun untuk jangka waktu tertentu. Kemudian, buat perubahan pada web, dan analisis ulang detail perilaku di situs Anda.

Dalam konteks ini, tampaknya cukup mudah untuk menyimpulkan bahwa jika Anda telah memperoleh hasil yang lebih baik selama periode pertama atau kedua, itu karena versi yang diuji selama periode tersebut lebih baik daripada yang lain.

Yah, aku minta maaf untuk memberitahu Anda itu bukan ide yang baik. Pertama-tama, kuantitas dan kualitas lalu lintas yang mencapai situs web Anda dapat bervariasi antara hari dan minggu. Halaman yang sama dapat satu hari atau minggu mengkonversi 15% dan hari atau minggu berikutnya 12%.

Perubahan ini mungkin disebabkan oleh faktor-faktor yang sama sekali tidak terkait dengan situs web Anda (iklim ekonomi, suasana hati pengunjung Anda, dll). Misalnya, berkat tweet yang menjadi viral, Anda meningkatkan lalu lintas di situs web Anda. Tetapi jenis lalu lintasnya kurang berkualitas dan setelah mencapai situs web Anda, konversinya lebih sedikit. Contoh lain: Anda meluncurkan iklan baru di Google dengan penawaran dan persentase pengunjung yang datang ke situs web Anda melalui iklan dan kemudian melakukan konversi sangat tinggi.

Oleh karena itu, satu-satunya cara untuk mempertimbangkan semua faktor ini adalah dengan melakukan pengujian A/B di mana setiap varian ditampilkan ke jumlah pengunjung yang proporsional selama periode yang sama. Dengan menampilkan dua (atau lebih) versi secara acak kepada pengunjung di minggu yang sama, ada kemungkinan lebih besar bahwa hasilnya relevan secara statistik.

Jadi lupakan melakukan tes sebelum dan sesudah karena Anda tidak akan tahu pasti seberapa relevan hasilnya untuk memutuskan versi mana yang lebih baik.

#2 Menyelesaikan Tes Lebih Awal

Sekarang Anda tahu bahwa Anda harus melakukan pengujian A/B, Anda baru saja menginstal Nelio A/B Testing dan bersemangat untuk meluncurkan pengujian halaman pertama Anda.

Anda mulai mengumpulkan hasil dan dengan cepat varian mulai memiliki lebih banyak konversi daripada halaman asli. Mengapa membuang waktu? Mengapa tidak membuat perubahan cepat dan membuat varian baru permanen? Ini akan meningkatkan konversi lebih cepat…

Volume

Pengujian A/B didasarkan pada statistik dan, dengan demikian, penting untuk diingat bahwa ukuran sampel Anda penting—itu harus representatif. Dengan kata lain, kita harus memastikan bahwa kita telah memperoleh hasil yang cukup dari pengujian kita agar tes tersebut cukup mencerminkan kenyataan.

Jika Anda menggunakan alat khusus untuk melakukan pengujian A/B, seperti Pengujian A/B Nelio, alat itu sendiri akan memberi tahu Anda jika hasil pengujian Anda signifikan secara statistik.

Kemudian Anda mungkin berpikir bahwa, karena Anda memiliki situs web dengan banyak lalu lintas, Anda akan segera mendapatkan hasil dari apa yang paling berhasil.

Durasi

Hati-Hati! Ada faktor lain yang perlu dipertimbangkan saat membuat pengujian A/B. Bukan hanya soal volume, tetapi pastikan pengujian Anda bertahan cukup lama untuk mencakup siklus bisnis Anda. Artinya, jika, misalnya, jenis lalu lintas yang Anda terima berbeda pada hari kerja dan akhir pekan, pastikan bahwa pengujian berlangsung dalam jangka waktu minimum untuk semua jenis lalu lintas yang diwakili.

Saya merekomendasikan kalkulator CXL bagi Anda untuk menjelajahi lebih banyak durasi dan ukuran yang harus dimiliki oleh tes A/B agar hasilnya signifikan secara statistik.

Ingat: menarik kesimpulan sebelumnya sama dengan membuat keputusan dengan intuisi.

#3 Mengakhiri Tes Terlambat

Sekarang kita pergi ke ekstrem yang lain: Anda baru saja meluncurkan tes dan Anda mendapatkan hasil yang berbeda. Karena Anda tahu bahwa Anda tidak dapat mengambil kesimpulan terlalu cepat, Anda memutuskan untuk menunggu sampai Anda mendapatkan data yang konklusif, bukan? Hari-hari berlalu dan tidak ada varian yang terlihat lebih baik dari yang lain, jadi mungkin Anda harus terus menunggu…

Yah, kami sudah mengatakan untuk tidak terburu-buru, tetapi jika Anda sudah tiga bulan tanpa hasil yang meyakinkan, Anda mungkin membuang-buang waktu. Dan Anda menyia-nyiakannya karena alasan sederhana bahwa Anda melewatkan jenis pengujian lain yang mungkin dapat memberi Anda informasi yang jauh lebih relevan tentang cara mengoptimalkan konversi.

#4 Mengandalkan Tes Orang Lain

Kami dapat dan harus belajar dari orang lain, tetapi saya khawatir data statistik orang lain tidak selalu berlaku untuk situs web Anda. Artinya, Anda mungkin pernah membaca beberapa artikel yang berkomentar bahwa warna tombol ajakan bertindak yang paling berhasil adalah merah.

Teorinya sangat bagus tetapi kenyataannya adalah Anda tidak memutuskan bahwa hasil ini akan berguna tanpa terlebih dahulu mengujinya di situs web Anda. Studi kasus orang lain tidak berguna untuk membuat keputusan tentang kasus khusus Anda. Mereka akan berguna bagi Anda untuk memiliki ide-ide baru tentang hal-hal apa yang dapat Anda uji.

#5 Mengubah Tes Lari

Mungkin salah satu kesalahan terburuk yang dapat Anda lakukan setelah meluncurkan tes AB di situs web Anda adalah menghentikannya, membuat perubahan tertentu, dan melanjutkannya. Paling-paling, perbaiki kesalahan ketik kecil yang Anda deteksi tetapi jangan membuat varian baru atau mengubah yang sudah berjalan. Perubahan ini benar-benar dapat membatalkan hasil yang diperoleh.

Jika Anda berada dalam situasi di mana Anda ingin membuat perubahan pada pengujian A/B yang sedang berjalan, hentikan sepenuhnya dan jalankan pengujian baru. Kedua tes secara terpisah akan memberi Anda hasil yang valid. Jika Anda mau, cobalah untuk menginterpretasikan hasil keduanya bersama-sama, tetapi ketahuilah bahwa Anda tidak akan dapat memperoleh hasil yang andal jika Anda membuat perubahan pada pengujian A/B yang sedang berjalan.

#6 Menjalankan Banyak Tes Secara Bersamaan

Buat hidup Anda sederhana dengan pengujian A/B. Jika Anda mencoba menganalisis terlalu banyak perubahan sekaligus, Anda akan merasa sangat sulit untuk menginterpretasikan hasil setiap tes. Anda dapat membuat dua atau lebih varian halaman yang menampilkan versi yang sangat berbeda. Tidak apa-apa untuk melakukan ini, dan faktanya, telah dipelajari bahwa perubahan besar dapat berdampak lebih besar pada konversi.

Namun, jangan mencoba melakukan banyak tes secara bersamaan. Untuk setiap pengujian baru yang Anda buat, divisi lalu lintas baru akan dibuat untuk berbagai kemungkinan kombinasi varian bersama dengan yang dibuat sebelumnya. Dan semakin banyak varian yang akhirnya Anda miliki, semakin banyak lalu lintas Anda akan dibagi dan semakin banyak biaya yang Anda keluarkan untuk mendapatkan hasil yang signifikan secara statistik.

#7 Tidak Mengetahui Tujuan Tes Anda

Dan ini harus menjadi kesalahan terpenting yang harus Anda hindari.

Tujuan pengujian A/B adalah untuk mengoptimalkan konversi. Baik. Dari sini, terapkan akal sehat. Semua halaman dan posting memiliki tujuan di situs web Anda: untuk menginformasikan tentang produk dan layanan yang Anda tawarkan, untuk membuat diri Anda dikenal, untuk menjelaskan detail tentang cara kerja produk atau layanan, untuk memastikan bahwa Anda mematuhi undang-undang perlindungan data, dll. Meskipun semuanya penting, beberapa di antaranya jauh lebih penting di corong konversi.

Misalnya, jika Anda memiliki e-niaga, halaman yang paling relevan adalah halaman yang menampilkan semua produk, halaman yang menampilkan detail produk, dan halaman tempat pembayaran dilakukan. Jadi, untuk memulainya, jangan bingung dengan menganalisis halaman lain dan fokus untuk mengoptimalkan halaman ini.

Juga, pikirkan baik-baik tentang tujuan terpenting di masing-masing tujuan:

• Biarkan pengunjung membeli produk itu.
• Biarkan pengunjung menambahkan produk itu ke daftar keinginan atau keranjang belanja.
• Minta mereka melihat produk terkait lainnya.
• Untuk merekomendasikan pembelian produk tersebut kepada pihak ketiga.
• Untuk menghubungi Anda untuk informasi lebih lanjut.

Identifikasi tujuan Anda dengan baik dan pikirkan tentang perbaikan apa yang dapat membantu Anda mencapainya. Dari sana, tes yang Anda yakini akan masuk akal dan membantu meningkatkan situs web Anda.

Gambar unggulan oleh Sarah Kilian di Unsplash.