Buka Kekuatan Eksperimen yang Dipimpin Produk dengan Panduan Baru Kami

Dalam lanskap kompetitif saat ini, eksperimen yang dipimpin produk lebih dari sekadar ide bagus—tim produk dan teknik perlu mengukur dampaknya.Tetapi tim perlu menumbuhkan budaya eksperimen dan memasukkannya ke dalam setiap fase proses pengembangan produk untuk membangun dengan percaya diri.

Kami telah bekerja sama dengan Reforge untuk membuat panduan komprehensif untuk eksperimen yang dipimpin produk, menampilkan wawasan dan saran dari pakar di bidangnya. Panduan ini akan membantu tim produk dan teknik membuat program eksperimen dan membuka potensi penuh produk mereka. Dalam posting ini, kami akan memberi Anda ikhtisar tentang apa yang diharapkan dalam panduan ini.

Unduh panduan lengkap—Bangun dengan Keyakinan: Panduan Anda untuk Menskalakan Eksperimen yang Dipimpin Produk—untuk mempelajari cara membangun budaya eksperimen, memahami praktik eksperimen, memprioritaskan peta jalan eksperimen Anda, dan banyak lagi.

Mengapa eksperimen itu penting

Dalam lingkungan yang kompetitif saat ini, eksperimen bukanlah pilihan bagi tim produk. Inilah yang membantu tim membangun produk yang sukses dan inovatif serta mengikat pekerjaan mereka ke organisasi yang lebih luas.

Saleem Malkana, Executive in Residence di Reforge, menjelaskan bahwa eksperimen membantu tim produk mengukur dampak pekerjaan mereka dan meningkatkan strategi produk. “Tim produk terbaik tahu bahwa yang benar-benar penting bukan hanya mengirimkan hasil tersebut, melainkan hasil apa yang mereka dorong,” jelasnya.

Untuk mengukur dampak perubahan produk, tim perlu mengembangkan hipotesis, menjalankan eksperimen, dan mengevaluasi hasilnya. Mereka dapat menggunakan hasil percobaan untuk menginformasikan strategi produk masa depan mereka.

Pengujian juga merupakan cara untuk mengurangi risiko perubahan produk. Tim produk dapat menilai dampak keputusan produk sebelum meluncurkannya ke semua pengguna—yang dapat menyebabkan kesalahan yang mahal.

Wil Pong, Kepala Produk untuk Eksperimen Amplitudo, berpendapat bahwa eksperimen yang dipimpin produk menghasilkan inovasi yang lebih cepat tanpa mengganggu siklus pengembangan teknik menggunakan lebih banyak peralatan tingkat permukaan, seperti pendekatan WYSIWYG.

Di masa lalu, hanya perusahaan besar seperti Netflix yang dapat menawarkan pengalaman yang disesuaikan dan bereksperimen dengan berbagai antarmuka produk atau mesin rekomendasi. Kini, dengan aplikasi baru seperti Eksperimen Amplitudo, organisasi dengan berbagai ukuran dapat mengulang dan menyempurnakan produk mereka secara waktu nyata berdasarkan kebutuhan pengguna.

Eksperimen yang dipimpin produk memungkinkan tim produk untuk memberikan eksperimen yang sangat bertarget di seluruh produk mereka menggunakan tanda fitur, yang memungkinkan tim memiliki kendali penuh untuk mengaktifkan atau menonaktifkan pengalaman. Hal ini memungkinkan tim untuk “menghadirkan eksperimen yang sangat tertarget dan rilis fitur menggunakan proses dan teknologi yang sama yang mendukung pengembangan produk [mereka] lainnya”, yang pada akhirnya akan mendorong inovasi cepat tanpa mengganggu tim teknis, jelas Wil.

Eksperimen juga penting bagi pemimpin produk, mengingat pergeseran akuntabilitas baru-baru ini. Bhavik Patel, pendiri dan Managing Director CAUSL, menjelaskan bahwa organisasi telah beralih dari pendekatan berbasis hasil ke pendekatan berbasis hasil, menempatkan lebih banyak pengawasan pada pemimpin produk. Meskipun sulit untuk mengukur ROI tim produk (organisasi biasanya menggunakan jumlah staf atau jam teknis), melacak dampak produk melalui eksperimen membantu tim produk mengaitkan pekerjaan mereka dengan sasaran perusahaan yang lebih luas.

Apa artinya membangun budaya eksperimen

Budaya eksperimen harus melibatkan semua bagian organisasi. Untuk membangun budaya tersebut, organisasi perlu melalui perubahan pola pikir dan membangun sistem dan proses yang konkret untuk mendukung kecepatan pembelajaran mereka, bukan hanya pengiriman yang cepat.

Saleem menjelaskan bahwa budaya eksperimen tidak murni bersifat teknis. Ini adalah kombinasi dari:

• Orang: Anggota tim digerakkan oleh data.
• Proses & komunikasi terintegrasi: Eksperimen adalah bagian dari proses pengembangan produk dengan komunikasi yang sehat antar tim.
• Teknologi: Organisasi menggunakan platform yang memungkinkan eksperimen.

Idealnya, eksperimen akan ada di setiap level organisasi, dengan fokus pada level pasukan—itulah yang menciptakan fondasi untuk kelincahan dan kemampuan beradaptasi. Pengujian juga harus menjadi bagian dari operasi sehari-hari, sehingga tim mendapatkan wawasan yang stabil yang dapat mereka gunakan untuk menyempurnakan produk.

Untuk menciptakan budaya eksperimen, tim harus mengembangkan pola pikir yang merangkul rasa ingin tahu dan "kegagalan" karena keduanya merupakan mekanisme pembelajaran. Untuk menghasilkan momentum di sekitar eksperimen, penting juga untuk mendapatkan juara eksekutif.

Seorang eksekutif yang membeli eksperimen akan membantu menyediakan sumber daya seperti waktu, anggaran, dan alat. Mereka juga akan membantu menciptakan saluran untuk komunikasi terbuka dan kolaborasi lintas departemen.

Baca lebih lanjut di panduan lengkap.

Bagaimana memulai perjalanan eksperimentasi Anda

Menerapkan program eksperimen dalam suatu organisasi membutuhkan waktu. Berikut ini beberapa praktik terbaik saat Anda memulai.

Mulai dari yang kecil dan tingkatkan

Tujuan utamanya adalah meluncurkan eksperimen di seluruh organisasi. Namun, organisasi harus memulai dari yang kecil dengan pengujian berisiko rendah di satu tim sebelum melakukan penskalaan.

Saleem merekomendasikan untuk membangun satu "pusat keunggulan:" satu tim yang harus memvalidasi tumpukan eksperimen dasar dan membangunnya dari sana. Elena Verna, Growth Advisor dan Interim Growth Exec, menjelaskan, “satu tim pertama-tama harus belajar cara menguji, cara belajar, dan cara menang.”

Dia melanjutkan: “Setelah tim itu mengembangkan keterampilan eksperimen dan pola pikir, mereka harus bekerja untuk mendemokratisasi akses ke pengujian dan pembelajaran. Dengan begitu, seluruh organisasi dapat belajar cara menang dengan eksperimen.” Pada akhirnya, anggota tim di semua departemen harus dapat menjalankan tes untuk menginformasikan keputusan sehari-hari mereka.

Bhavik menyarankan tim memulai dengan tes berisiko rendah: "Saya tidak akan menyarankan untuk memulai dengan eksperimen penetapan harga yang rumit, misalnya, tetapi ini adalah tujuan yang bagus untuk diusahakan."

Dia juga memperingatkan agar tidak terpaku pada angka yang tidak realistis. Mayoritas perusahaan seharusnya tidak mencoba menjalankan ribuan percobaan. Sebaliknya, "sasarannya harus menjalankan lebih banyak [tes] daripada yang mereka lakukan pada kuartal atau tahun lalu," katanya.

Ideate, validasi, prioritaskan

Menjalankan eksperimen yang tidak perlu akan menghabiskan sumber daya, sehingga tim harus selektif dalam memilih eksperimen mana yang akan dijalankan.

Mulailah ide Anda dengan pohon metrik (diagram yang menunjukkan bagaimana semua elemen tangga produk mencapai tujuan perusahaan) atau diagram matahari (ikhtisar alur kerja organisasi Anda). Meninjau diagram tersebut dengan memberi Anda gambaran tentang di mana harus memfokuskan upaya eksperimen Anda.

Untuk menguji ide, pertama-tama validasikan konsep uji untuk mengidentifikasi ide mana yang layak dikejar. Untuk memvalidasi, Anda dapat menggunakan tes pintu yang dicat, riset meja, atau memeriksa hasil dari eksperimen serupa.

Kemudian, pertimbangkan waktu untuk mengetahui wawasan dari setiap pengujian potensial. Elena menekankan bahwa tim harus memprioritaskan kecepatan pembelajaran dan mempertimbangkan berapa lama waktu yang dibutuhkan untuk membuateksperimen, bukan hanya menjalankannya. Saleem juga menyarankan memecah tantangan besar menjadi hipotesis yang lebih kecil yang dapat diuji untuk mendapatkan putaran umpan balik yang lebih cepat.

Faktor-faktor lain yang perlu dipertimbangkan termasuk:

• Volume di berbagai titik di produk Anda karena Anda memerlukan lalu lintas yang cukup untuk menjalankan pengujian
• Apakah pengujian yang ingin Anda jalankan dapat diukur dengan alat analitik yang Anda miliki

Setelah Anda memvalidasi ide pengujian, prioritaskan eksperimen mana yang akan dijalankan berdasarkan:

• Kapasitas pengujian Anda
• Seberapa besar dampak yang Anda harapkan dari tes tersebut
• Seberapa yakin Anda bahwa hal itu akan memberikan dampak yang diinginkan
• Upaya yang terlibat dalam menjalankan tes

Rancang eksperimen Anda menggunakan praktik terbaik

Bhavik menjelaskan bahwa eksperimen yang dirancang dengan baik berakar pada metode ilmiah. Mereka dapat dipecah menjadi tahapan berikut: perencanaan sebelum eksperimen, pemantauan selama eksperimen, dan analisis setelah eksperimen.

Setelah memvalidasi ide eksperimen dan memilih pengujian mana yang akan diprioritaskan, Anda harus merencanakan eksperimen. Dokumentasikan alasan untuk menjalankan eksperimen. Mengartikulasikan dengan jelas apa yang sedang diuji dan dimodifikasi—bisa berupa perubahan desain atau fitur atau pengalaman baru.

Bangun hipotesis dan tetapkan metrik produk atau KPI yang ditentukan dengan jelas untuk eksperimen Anda. Tentukan langkah selanjutnya berdasarkan kemungkinan hasil. Tentukan apa yang terjadi ketika setiap varian menang atau jika pengujian tidak mencapai signifikansi statistik.

Pelajari lebih dalam perencanaan pra-eksperimen dalam panduan lengkap.

Selama percobaan, buat dasbor analitik untuk terus memantau pengujian. Setelah percobaan, analisis hasilnya dan nyatakan hasilnya. Kemudian, tim dapat bergerak maju dengan langkah selanjutnya yang telah ditentukan sebelumnya.

Membangun dengan percaya diri

Untuk panduan lebih lanjut tentang cara menjalankan program eksperimen yang berhasil, unduh panduan eksperimen yang dipimpin produk.