Apakah Anda membuang-buang waktu dengan pengujian A / B? Banyak perusahaan membuat kesalahan dalam tes A / B yang menghabiskan waktu dan uang yang mereka tidak mampu, karena mereka tidak mengerti seperti apa tes A / B dan bagaimana menjalankannya dengan benar.
Pengujian A / B adalah cara luar biasa untuk meningkatkan konversi Anda, untuk bisnis apa pun. Kami telah melihat bahwa pelanggan OptinMonster menggunakan pengujian terpisah untuk dengan mudah mendapatkan lebih banyak arahan penjualan yang berkualitas, menambah daftar email mereka, dan bahkan meningkatkan konversi hingga 1500%.
TETAPI jika Anda membuat salah satu kesalahan tes divisi umum yang tercantum di bawah ini, tes divisi Anda mungkin berhasil lebih banyak ruginya daripada kebaikan. Qubit mengatakan pengujian split yang dilakukan dengan buruk dapat membuat perusahaan berinvestasi dalam perubahan yang tidak perlu dan bahkan mungkin merugikan keuntungan mereka.
Yang benar adalah, ada jauh lebih banyak untuk pengujian A / B dari sekedar menyiapkan tes. Jika Anda benar-benar ingin melihat peningkatan yang dapat disebabkan oleh pengujian terpisah, Anda harus menjalankan tes dengan cara yang benar dan menghindari kesalahan yang merusak hasil Anda.
Dalam artikel ini, Anda akan mengungkap kesalahan pengujian A / B yang dibuat oleh banyak perusahaan sehingga Anda dapat menghindarinya, dan mempelajari cara menggunakan pengujian terpisah dengan cara KANAN untuk mengungkap strategi tersembunyi yang dapat memicu konversi Anda.
Ayo mulai!
1. Split Uji halaman yang salah
Salah satu masalah terbesar dengan pengujian A / B adalah menguji halaman yang salah. Sangat penting untuk menghindari pemborosan waktu, sumber daya, dan uang dengan pengujian terpisah yang tidak berarti.
Bagaimana Anda tahu jika Anda harus menjalankan tes split? Jika Anda memasarkan bisnis, jawabannya mudah: Halaman terbaik untuk membagi pengujian adalah yang membuat perbedaan dalam konversi dan mendorong lebih banyak prospek atau penjualan.
Hubspot mengatakan halaman terbaik untuk dioptimalkan di situs mana pun adalah halaman yang paling banyak dikunjungi:
Halaman produk sangat penting untuk diuji situs e-commerce, terutama produk terlaris mereka.
Dengan kata lain, jika suatu halaman bukan bagian dari saluran pemasaran atau penjualan Anda, ada sedikit gunanya untuk mencobanya (kecuali jika Anda ingin menambahkannya ke saluran tersebut).
Jika melakukan perubahan tidak akan memengaruhi garis bawah, lanjutkan dan coba halaman yang akan menambah penghasilan Anda sebagai gantinya.
2. Memiliki hipotesis yang tidak valid
Salah satu kesalahan tes A / B yang paling penting untuk dihindari adalah tidak memiliki hipotesis yang valid.
Apa yang dimaksud dengan hipotesis uji A / B? Hipotesis uji A / B adalah teori tentang mengapa Anda mendapatkan hasil tertentu pada halaman web dan bagaimana Anda dapat meningkatkan hasil tersebut.
Mari kita lihat lebih dekat. Untuk membentuk hipotesis, Anda perlu:
- Langkah 1: Perhatikan apakah orang-orang beralih ke situs Anda. Anda akan mendapatkan informasi ini dari perangkat lunak analitik yang melacak dan mengukur apa yang dilakukan orang di situs Anda. Misalnya, ini akan memberi tahu Anda jika orang mengklik ajakan Anda untuk bertindak, berlangganan newsletter Anda, atau menyelesaikan pembelian.
- Langkah 2: Berspekulasi tentang mengapa hal-hal tertentu terjadi. Misalnya, jika orang membuka halaman arahan Anda, tetapi tidak mengisi formulir untuk mengambil magnet utama mereka, atau halaman tersebut memiliki rasio pentalan tinggi, maka mungkin ajakan untuk bertindak salah.
- Langkah 3: Pikirkan beberapa kemungkinan perubahan yang dapat menyebabkan lebih banyak perilaku yang Anda inginkan di halaman tertentu. Misalnya, dalam skenario di atas, Anda dapat mencoba versi lain dari ajakan bertindak Anda.
- Tahap 4: Hitung bagaimana Anda akan mengukur keberhasilan untuk mengetahui dengan pasti jika perubahan tertentu membuat perbedaan dalam konversi. Ini adalah bagian penting dari hipotesis uji A / B.
Ini adalah bagaimana Anda akan menggabungkan semuanya, mengikuti contoh kami sebelumnya:
- Pengamatan: Kami perhatikan bahwa meskipun ada banyak lalu lintas di halaman utama magnet kami, tingkat konversi rendah dan orang-orang tidak mendaftar untuk mendapatkan magnet utama.
- Kemungkinan alasannya: Kami percaya ini karena panggilan untuk bertindak tidak cukup jelas.
- Solusi yang disarankan: Kami percaya kami dapat menyelesaikan ini dengan mengubah teks pada tombol ajakan untuk bertindak agar lebih aktif.
- Pengukuran: Kami akan tahu bahwa kami benar jika kami meningkatkan langganan sebesar 10% di bulan setelah modifikasi.
Perhatikan bahwa Anda memerlukan semua elemen untuk hipotesis yang valid: melihat data, berspekulasi pada alasan, mengusulkan teori tentang cara memperbaikinya, dan mengukur hasilnya setelah menerapkan array.
3. Tes Split Terlalu Banyak Elemen
Ini adalah salah satu kesalahan utama dalam pengujian A / B yang dilakukan banyak orang: mencoba membagi tes menjadi terlalu banyak elemen sekaligus.
Ini mungkin tampak seperti menguji beberapa elemen halaman sekaligus menghemat waktu, tetapi tidak. Yang terjadi adalah Anda tidak akan pernah tahu perubahan apa yang bertanggung jawab atas hasilnya.
Kami mungkin akan menyebutkannya beberapa kali karena ini sangat penting: pengujian terpisah berarti mengubah item pada satu halaman dan mengujinya pada versi lain dari item yang sama, seperti yang diilustrasikan di sini:
Saat Anda mengubah lebih dari satu item sekaligus, Anda memerlukan tes multivarian, yang dijelaskan secara rinci dalam uji split kami versus perbandingan tes multivarian.
Pengujian multivarian dapat menjadi cara yang bagus untuk menguji desain ulang situs web di mana Anda harus mengubah banyak elemen pada halaman. Tetapi Anda bisa berakhir dengan banyak kombinasi untuk dicoba, dan itu membutuhkan waktu yang mungkin tidak ingin Anda investasikan. Pengujian multivarian juga hanya berfungsi dengan baik untuk situs dan halaman dengan traffic tinggi.
Dalam kebanyakan kasus, tes split sederhana akan memberi Anda hasil paling signifikan.
4. Jalankan terlalu banyak tes split sekaligus
Ketika datang ke pengujian A / B, tetap sederhana.
Tidak apa-apa untuk menjalankan beberapa tes split. Misalnya, Anda bisa mendapatkan hasil yang signifikan dengan menguji tiga versi tombol ajakan bertindak yang berbeda. (Menjalankan tes ini tidak sama dengan tes multivarian, karena Anda masih hanya mengubah satu item untuk setiap tes.)
Pengoptimal konversi yang paling berpengalaman merekomendasikan hal itu jangan menjalankan lebih dari empat tes split sekaligus. Salah satu alasannya adalah bahwa semakin banyak variasi yang Anda jalankan, semakin besar ukuran sampel uji A / B yang Anda butuhkan. Ini karena Anda harus mengirim lebih banyak lalu lintas ke setiap versi untuk mendapatkan hasil yang andal.
Ini dikenal sebagai signifikansi statistik pengujian A / B (atau, dalam istilah sehari-hari, memastikan jumlahnya cukup besar untuk memiliki arti sebenarnya), yang dapat Anda verifikasi dengan alat yang diuraikan dalam panduan pengujian terpisah kami.
5. Dapatkan waktu yang salah
Dengan pengujian A / B, waktu adalah segalanya, dan ada beberapa kesalahan pengujian A / B klasik terkait waktu …
Bandingkan periode waktu yang berbeda
Misalnya, jika Anda mendapatkan lalu lintas terbanyak dari situs Anda pada hari Rabu, maka tidak masuk akal untuk membandingkan hasil tes split untuk hari itu dengan hasil pada hari dengan lalu lintas rendah.
Bahkan yang lebih penting, jika Anda seorang pengecer e-commerce, Anda tidak dapat membandingkan hasil tes split untuk liburan booming dengan hasil yang Anda dapatkan selama penurunan penjualan Januari.
Dalam kedua kasus, Anda tidak membandingkan suka dengan suka, jadi Anda tidak akan mendapatkan hasil yang andal. Solusinya adalah menjalankan tes Anda untuk periode yang sebanding, sehingga Anda dapat menilai secara akurat apakah ada perubahan yang membuat perbedaan.
Penting juga untuk memperhatikan faktor-faktor eksternal yang dapat mempengaruhi hasil tes yang dibagi. Jika Anda memasarkan secara lokal dan listrik padam karena bencana alam, maka Anda tidak akan mendapatkan traffic atau hasil yang Anda harapkan. Dan penawaran terkait musim dingin tidak akan memiliki dampak yang sama dengan pendekatan musim panas, kata Small Business Sense.
Jangan menjalankan tes terlalu lama
Anda juga harus menjalankan uji A / B selama periode waktu tertentu untuk mencapai signifikansi statistik uji A / B dan peringkat kepercayaan 95% standar industri pada hasil. Angka 95% itu berarti Anda bisa yakin bahwa hasil Anda akurat dan bahwa Anda yakin akan membuat keputusan pemasaran baru berdasarkan data itu.
Seperti yang akan Anda lihat di tip # 7, waktu itu bervariasi berdasarkan pada jumlah konversi yang diharapkan dan jumlah variasi. Jika Anda menjalankan 2 varian dan mengharapkan 50 konversi, periode uji coba Anda akan lebih pendek daripada jika Anda memiliki 4 varian dan mencari 200 konversi.
Berikut ini grafik dari Pengoptimal Situs Web Visual untuk membantu Anda menentukan apakah Anda telah mencapai signifikansi statistik untuk pengujian A / B. Masukkan jumlah pengunjung dan konversi untuk pengujian Anda, dan hitung signifikansi statistik. Ini juga termasuk nilai P, nilai statistik yang juga membantu untuk menggarisbawahi keandalan statistik Anda.
Tes untuk penundaan waktu yang berbeda
Waktu juga dapat memengaruhi keberhasilan tes split OptinMonster Anda. Salah satu kesalahan pengujian A / B yang kami lihat orang lakukan dengan kampanye mereka adalah memvariasikan waktu kampanye mereka.
Jika kampanye ditampilkan setelah pengunjung Anda berada di halaman selama 5 detik dan yang lain setelah 20 detik, itu bukan tes pembagian yang sebenarnya.
Itu karena Anda tidak membandingkan pemirsa serupa. Secara umum, lebih banyak orang akan tetap di halaman selama 5 detik dari 20 detik.
Akibatnya, Anda akan melihat tayangan berbeda untuk setiap kampanye, dan hasilnya tidak akan masuk akal atau berguna bagi Anda.
Ingat, untuk tes pembagian yang benar, Anda harus mengubah item pada halaman, BUKAN waktu. Tetapi jika Anda ingin bereksperimen menentukan waktu pilihan Anda, artikel tentang sembulan ini, gerbang sambutan, dan kampanye geser memiliki beberapa saran.
6. Bekerja dengan lalu lintas yang salah
Kami menyebutkan signifikansi statistik dari uji A / B di atas. Selain mendapatkan periode uji coba yang benar, Anda juga harus memiliki jumlah lalu lintas yang benar. Pada dasarnya Anda harus menguji kampanye Anda dengan cukup banyak orang untuk mendapatkan hasil yang bermakna.
Jika Anda memiliki situs lalu lintas tinggi, Anda akan dapat menyelesaikan tes split dengan cepat, karena aliran pengunjung yang konstan ke situs Anda.
Jika Anda memiliki situs dengan sedikit kunjungan atau kunjungan sporadis, itu akan memakan waktu lebih lama.
Penting juga untuk membagi lalu lintas dengan cara yang benar sehingga Anda BENAR-BENAR melakukan tes serupa. Beberapa program pengujian terpisah memungkinkan Anda untuk menetapkan lalu lintas yang Anda gunakan untuk pengujian secara manual, tetapi lebih mudah untuk membagi lalu lintas secara otomatis untuk menghindari kemungkinan mendapatkan hasil yang tidak dapat diandalkan dari tipe pemisahan yang salah.
Jika Anda menggunakan OptinMonster untuk pengujian A / B, mudah untuk melakukannya dengan benar, karena OptinMonster secara otomatis membagi lalu lintas Anda berdasarkan jumlah tes yang Anda jalankan.
7. Coba terlalu dini
Kesalahan umum dengan pengujian A / B adalah menjalankan tes split terlalu dini.
Misalnya, jika Anda memulai kampanye OptinMonster baru, Anda harus menunggu sedikit sebelum memulai tes split. Pada awalnya, membuat tes split tidak masuk akal karena Anda tidak akan memiliki data untuk membuat garis dasar untuk perbandingan. Anda tidak akan menguji apa pun, yang membuang-buang waktu.
Alih-alih, jalankan kampanye baru Anda setidaknya selama satu minggu dan lihat cara kerjanya sebelum Anda mulai mengubah dan menguji. Anda dapat menggunakan grafik Digital Marketer ini untuk menghitung periode percobaan ideal Anda, berdasarkan pada jumlah konversi yang diharapkan.
8. Perubahan parameter pada pertengahan tes
Salah satu cara untuk benar-benar mengacaukan rutinitas pengujian A / B Anda adalah dengan mengubah pengaturan Anda di tengah-tengah tes.
Ini terjadi jika Anda:
- Anda memutuskan untuk mengubah jumlah lalu lintas web yang dilihat oleh kontrol atau variasi.
- Tambahkan atau ubah variasi sebelum akhir periode uji coba A / B yang ideal, seperti yang ditunjukkan pada tabel di atas.
- Ubah tujuan tes Anda yang terbagi.
Seperti yang dikatakan oleh Corong Yang Lebih Luas, perubahan tiba-tiba membuat tes Anda tidak valid dan condongkan hasilnya.
Jika Anda benar-benar perlu mengubah sesuatu, mulailah tes Anda lagi. Ini adalah satu-satunya cara untuk mendapatkan hasil yang dapat Anda percayai.
9. Pengukuran hasil yang tidak akurat
Mengukur hasil sama pentingnya dengan pengujian, namun itu adalah salah satu bidang di mana orang membuat kesalahan mahal pada tes A / B. Jika Anda tidak mengukur hasil dengan benar, Anda tidak dapat mempercayai data Anda dan tidak dapat membuat keputusan yang tepat. dalam data tentang pemasaran mereka.
Salah satu cara terbaik untuk menyelesaikan ini adalah memastikan bahwa solusi pengujian A / B Anda bekerja dengan Google Analytics.
OptinMonster terintegrasi dengan Google Analytics, sehingga Anda dapat melihat data akurat tentang lalu lintas dan konversi di dasbor Anda.
Inilah cara Google Analytics berintegrasi dengan OptinMonster sehingga Anda bisa mendapatkan informasi yang dapat ditindaklanjuti. Anda juga dapat mengatur dasbor Google Analytics Anda sendiri untuk mengumpulkan data kampanye dengan sisa metrik web Anda.
10. Penggunaan aturan tampilan yang berbeda
Salah satu cara untuk benar-benar mengacaukan hasil tes A / B OptinMonster adalah dengan membuat perubahan sewenang-wenang pada aturan tampilan.
OptinMonster memiliki aturan tampilan yang kuat yang mempengaruhi kapan kampanye ditampilkan, zona waktu dan lokasi mereka ditampilkan, siapa yang melihatnya, dan banyak lagi.
Tapi ingat itu tes split adalah tentang mengubah item di halaman. Jika Anda mengubah aturan tampilan sehingga satu opsi ditampilkan kepada orang-orang di Inggris dan yang lain untuk orang-orang di AS. Itu bukan perbandingan yang serupa.
Jika satu kampanye adalah gerbang selamat datang dan yang lainnya adalah kampanye maksud keluar, itu bukan perbandingan yang serupa. Jika kampanye ditampilkan pada jam 9 pagi dan yang lainnya pada jam 9 malam, itu bukan … well, idenya dipahami.
Jika kampanye Anda tidak ditampilkan secara bersamaan ke tipe audiens yang sama, Anda tidak akan mendapatkan data yang dapat diandalkan. Lihat panduan kami tentang menggunakan Aturan Melihat dengan OptinMonster untuk bantuan mengatur aturan kapan kampanye harus ditampilkan dan siapa yang harus melihatnya.
11. Menjalankan tes di tempat yang salah
Ini adalah salah satu bug uji A / B paling bodoh yang menurut Anda bisa dikenali kebanyakan orang.
Banyak orang menguji kampanye pemasaran mereka di situs pengembangan, yang merupakan ide bagus. Apa yang tidak begitu baik adalah bahwa kadang-kadang mereka lupa untuk memindahkan kampanye pilihan mereka ke situs langsung, dan kemudian tampaknya tes split mereka tidak berfungsi.
Ini karena satu-satunya orang yang mengunjungi situs pengembangan adalah pengembang web, bukan pelanggan mereka. Untungnya, membuat peralihan adalah solusi yang mudah, jadi jika Anda tidak melihat hasil yang Anda harapkan, masalah ini patut dicoba.
Jika Anda menggunakan OptinMonster, beginilah cara memecahkan masalah ini:
Masuk ke panel kontrol OptinMonster dan klik ikon akun Anda untuk menampilkan menu tarik-turun. Arahkan ke Akun saya.
Pergi Situs.
Pilih situs yang ingin Anda ubah dan klik edit.
Ubah URL situs web situs pengembangan ke situs langsung, lalu simpan perubahan Anda.
Untuk panduan lebih lanjut, baca dokumen kami tentang cara menambah, menghapus, atau mengedit situs web di OptinMonster.
12. Berikan pengujian terpisah
Beberapa perusahaan terus mengoptimalkan situs mereka, yang berarti mereka selalu menguji dan meningkatkan konversi. Lainnya, tidak banyak.
Salah satu kesalahan tes A / B yang paling ingin Anda hindari adalah menghentikan tes Anda terlalu dini (misalnya, sebelum minimum satu minggu yang disebutkan di atas) atau memutuskan bahwa tes gagal dan hentikan.
Menyerahkan pengujian terpisah adalah kesalahan besar karena Anda tidak akan menuai manfaat pengoptimalan jika melakukannya.
Pertama-tama, tidak ada tes split yang gagal, karena tujuan tes adalah untuk mengumpulkan data. Anda dapat mempelajari beberapa hasil tak terduga yang membantu Anda membuat tes baru.
Kedua, jika Anda menyerah karena Anda tidak mendapatkan hasil yang Anda harapkan, lanjutkan dengan apa yang dikatakan oleh data Anda. Naluri Anda, juga dikenal sebagai bias konfirmasi, bisa saja salah. Anda selalu dapat menjalankan tes baru di akhir periode percobaan untuk melihat apakah perubahan yang berbeda akan mencapai hasil yang Anda harapkan.
Ketiga, jangan putuskan bahwa tes telah berjalan cukup lama jika Anda belum memiliki cukup waktu untuk mendapatkan ukuran sampel yang layak dan mencapai signifikansi statistik dan skor kepercayaan 95%. Jika tidak, Anda akan membuang waktu Anda.
13. Ikuti studi kasus uji split secara buta
Itu selalu baik untuk membaca studi kasus dan belajar tentang teknik pengujian split yang bekerja untuk perusahaan yang berbeda.
Tapi satu kesalahan tes A / B yang harus Anda hindari adalah menyalin apa yang berhasil untuk orang lain.
Jika itu tampak aneh, dengarkan kami …
Tidak apa-apa menggunakan studi kasus untuk mendapatkan ide tentang bagaimana dan apa yang harus dibagi tes, tetapi perlu diketahui bahwa apa yang berhasil untuk bisnis lain mungkin tidak cocok untuk Anda, karena bisnis mereka unik.
Alih-alih, gunakan studi kasus pengujian A / B sebagai titik awal untuk membuat strategi pengujian A / B. Anda sendiri. Dengan demikian, Anda dapat melihat apa yang terbaik untuk pelanggan Anda sendiri, bukan orang lain.
Sekarang setelah Anda mengetahui kesalahan pengujian A / B konyol yang menghabiskan waktu, tenaga, dan uang Anda, Anda bisa mendapatkan pengujian split Anda sebagai awal yang baik. Seperti yang Anda lihat, OptinMonster memudahkan Anda untuk menguji kampanye pemasaran Anda sehingga Anda bisa mendapatkan hasil yang lebih baik.
Untuk inspirasi pemasaran lainnya, lihat ringkasan ahli kami tentang cara membuat halaman arahan yang bagus untuk kampanye pemasaran Anda dan pelajari lebih lanjut tentang membuat kampanye seluler optin yang akan memberi Anda bisnis.
Dan jangan lupa untuk mengikuti kami Twitter y Facebook untuk panduan lebih rinci.
