Apa itu pengujian A/B di UX? | Penelitian UX #26

Diterbitkan: 2023-02-06

Pengujian A/B adalah metode penelitian yang sangat baik untuk menguji dua versi alternatif dari solusi yang diberikan secara bersamaan. Baca artikel kami untuk mempelajari cara melakukan pengujian A/B dan melihat manfaat dan batasannya.

Pengujian A/B di UX – daftar isi:

  1. Apa itu pengujian A/B dalam konteks penelitian UX?
  2. Kapan menerapkan pengujian A/B?
  3. Bagaimana cara melakukan pengujian A/B?
  4. Ringkasan

Apa itu pengujian A/B dalam konteks penelitian UX?

Pengujian A/B memungkinkan Anda menguji dua versi produk/solusi (versi A dan versi B) dan mengevaluasi versi yang mendapatkan persetujuan lebih besar dari pengguna. Cara mengukurnya meliputi tingkat konversi, waktu yang dihabiskan di situs atau umpan balik peserta dan kecenderungan mereka untuk merekomendasikan situs/produk tersebut. Sebelum pengujian, Anda perlu menentukan dan menentukan apa arti "sukses" untuk versi tertentu.

Kapan menerapkan pengujian A/B?

Anda dapat menerapkan pengujian A/B untuk pengujian prototipe, selama fase pengembangan produk, serta untuk membangun strategi pemasaran dan promosi. Mereka adalah alat yang sempurna untuk sampai pada keputusan yang dapat mempengaruhi keuntungan organisasi. Tes A/B sangat berguna terutama ketika kita sudah memiliki hipotesis berdasarkan penelitian sebelumnya dan ingin mengonfirmasi bahwa itu adalah solusi yang tepat. Pertanyaan penelitian yang dibuat untuk pengujian A/B mungkin terlihat seperti ini:

  • Versi produk mana yang menghasilkan rasio konversi lebih tinggi?
  • Manakah dari dua pemberitahuan push dengan kata berbeda yang meningkatkan keterlibatan dalam aplikasi?

Pengujian A/B yang baik harus menyertakan perbandingan sejelas mungkin, misalnya daripada membandingkan dua versi situs yang sama sekali berbeda, lebih baik menguji dua gaya tajuk yang berbeda atau dua lokasi berbeda dari tombol CTA. Dengan perbandingan kecil, kami akan mengenali font, warna, elemen, atau lokasi mana yang paling memengaruhi UX.

Metode penelitian ini terdiri dari dua jenis pengujian: univarian dan multivarian. Yang pertama berfokus pada perbedaan antara dua varian item – misalnya, tombol merah dan tombol biru. Namun, varian multivarian membandingkan lebih dari 2 varian tombol secara bersamaan – misalnya merah, biru, hijau, dan putih (selain itu, judulnya masih berbeda, misalnya “Periksa ini” dan “Lihat selengkapnya”).

Keuntungan utama pengujian A/B adalah kecepatan dan biaya rendah. Mereka juga memungkinkan mengevaluasi beberapa varian produk pada sekelompok besar orang sungguhan. Tetap waspada untuk fokus pada aspek-aspek ini yang dapat berdampak nyata pada persepsi keseluruhan suatu produk. Jangan bandingkan elemen acak. Buat hipotesis, lakukan penelitian pelengkap lainnya, lalu konsultasikan dengan tim desain dan pengembangan Anda. Bersama-sama, Anda akan menentukan fitur penting mana yang akan diperiksa dalam berbagai versi dengan melakukan pengujian A/B varian tunggal atau multivarian.

Pengujian A/B tampaknya merupakan bentuk penelitian cepat – meskipun ini bukan aturan. Anda mungkin perlu menjalankannya selama beberapa minggu untuk mendapatkan data yang cukup untuk analisis UX (tetapi Anda juga bisa melewati beberapa hari atau bahkan beberapa jam). Waktu yang diperlukan untuk menjalankan survei bergantung pada banyak faktor.

A/B testing

Bagaimana cara melakukan pengujian A/B?

  1. Identifikasi masalah Anda.
  2. Pastikan untuk menerapkan alat analitik yang tepat untuk menetapkan sifat masalah secara tepat.

  3. Cari tahu sebanyak mungkin tentang masalah serta pengguna. Dapatkan perasaan yang baik untuk mereka.
  4. Tentukan dengan tepat lokasi aliran dan coba cari tahu mengapa itu terjadi. Pemahamannya yang terperinci akan berkontribusi pada analisis yang benar-benar kaku.

  5. Merumuskan hipotesis dengan menjawab bagaimana memecahkan masalah.
  6. Hipotesis adalah asumsi yang dapat diuji. Anda dapat merumuskannya dalam bentuk kondisi – “jika X terjadi maka Z”, yaitu, misalnya, “jika tajuk utama menggunakan font 22, bukan 18, konversi akan meningkat”. Pengujian A/B akan memberi tahu Anda jika dugaan yang disajikan dalam hipotesis benar.

  7. Tentukan tujuan Anda.
  8. Tentukan apa yang ingin Anda capai dengan studi serta melalui seluruh proses penelitian dan desain – misalnya, Anda ingin lebih banyak pengguna mengklik tombol CTA di beranda.

  9. Tentukan akurasi statistik.
  10. Tentukan jumlah dan angka yang Anda perlukan untuk evaluasi praktis survei dan untuk ditampilkan oleh pemangku kepentingan bisnis – misalnya, apakah peningkatan konversi sebesar 2% akan memuaskan mereka dan layak untuk diinvestasikan dalam survei?

  11. Tentukan skala hasil yang diperlukan.
  12. Berapa jumlah responden yang akan memastikan keakuratan statistik? Berapa persentase basis pengguna harian, mingguan, atau bulanan yang akan membuat hasil ini berharga dan meyakinkan? Sangat penting untuk menentukan ini sebelum melanjutkan dengan survei.

  13. Buat versi B dan uji hipotesis Anda.
  14. Persiapkan varian ekstra (varian B) dari situs/produk/fungsionalitas untuk hipotesis Anda dan mulai pengujian. Pada tahap ini, pengembang masuk untuk mengimplementasikan solusi alternatif kedua untuk produk yang sudah ada – dan pengguna tanpa sadar membagi situs/aplikasi menjadi dua grup (grup A dan grup B) seperti sebelumnya. Selama penilaian, cobalah untuk melihat data Anda hanya setelah Anda mengumpulkan cukup data untuk mendapatkan validitas statistik dan hasil yang layak.

  15. Menganalisis dan menindaklanjuti hasil tes.
  16. Jika versi B Anda memenuhi ambang keefektifan yang ditetapkan dan versi tersebut mengonfirmasi hipotesis Anda, Anda dapat melanjutkan untuk menerapkannya untuk semua pengguna (tidak lagi terbagi antara versi A dan B). Namun, jika hipotesis tidak terbukti, tetap dengan versi asli A atau buat dan uji hipotesis baru. Juga, periksa metode penelitian alternatif untuk melengkapi data.

Ringkasan

Pengujian A/B adalah subjek yang cukup teknis. Itu membutuhkan pengetahuan statistik tertentu, serta pengetahuan teknis / pemrograman yang lebih khusus (atau hubungan yang baik dengan tim pengembangan perusahaan). Ini adalah metode langsung – selain itu cukup sederhana, cepat dan murah. Ini memungkinkan membandingkan dua versi alternatif dari suatu produk dengan biaya kecil dengan hasil yang memuaskan. Terlebih lagi, temuannya keluar atas dasar pengguna sebenarnya, mereka setepat yang Anda bisa dapatkan. Namun, ingatlah bahwa Anda tidak dapat menguji setiap fitur, elemen, atau detail kecil di situs – itulah sebabnya, saat melakukan pengujian A/B, melakukan metode riset pelengkap lainnya merupakan standar.

Baca juga: Metode penelitian penemuan

Jika Anda menyukai konten kami, bergabunglah dengan komunitas lebah sibuk kami di Facebook, Twitter, LinkedIn, Instagram, YouTube, Pinterest, TikTok.

What is A/B testing in UX? | UX research #26 klaudia brozyna avatar 1background

Penulis: Klaudia Kowalczyk

Desainer grafis & UX yang menyampaikan ke dalam desain apa yang tidak dapat disampaikan dengan kata-kata. Baginya, setiap warna, garis, atau font yang digunakan memiliki arti tersendiri. Bergairah dalam desain grafis dan web.

Riset UX:

  1. Apa itu penelitian UX?
  2. Jenis penelitian UX
  3. Apa itu pertanyaan penelitian dan bagaimana menulisnya?
  4. Proses pengumpulan persyaratan untuk proyek UI/UX
  5. Mengapa wawancara pemangku kepentingan penting untuk proses desain?
  6. Bagaimana memanfaatkan data pelanggan yang kami kumpulkan?
  7. Bagaimana cara membuat rencana penelitian UX yang baik?
  8. Bagaimana cara memilih metode penelitian?
  9. Bagaimana pengujian percontohan dapat meningkatkan penelitian UX?
  10. Perekrutan peserta studi UX
  11. Saluran dan alat untuk menemukan peserta riset UX
  12. Survei penyaring untuk Riset UX
  13. Insentif Penelitian UX
  14. Penelitian UX dengan anak-anak
  15. Metode penelitian penemuan
  16. Apa itu riset meja?
  17. Bagaimana cara melakukan wawancara pengguna?
  18. Bagaimana cara melakukan studi buku harian?
  19. Apa itu kelompok fokus dalam penelitian?
  20. Apa itu penelitian etnografi?
  21. Penelitian survei
  22. Apa itu penyortiran kartu di UX?
  23. Apa itu penelitian evaluatif?
  24. Bagaimana cara melakukan pengujian kegunaan?
  25. Kapan dan bagaimana menjalankan pengujian preferensi?
  26. Apa itu pengujian A/B di UX?
  27. Eyetracking dalam pengujian UX
  28. Apa itu pengujian pohon?
  29. Pengujian klik pertama
  30. Apa itu analisis tugas dalam penelitian UX?