ปลดล็อกพลังของการทดลองที่นำโดยผลิตภัณฑ์ด้วยคำแนะนำใหม่ของเรา
เผยแพร่แล้ว: 2023-05-04ในสภาพการแข่งขันในปัจจุบัน การทดลองโดยใช้ผลิตภัณฑ์เป็นมากกว่าความคิดที่ดี—จำเป็นสำหรับทีมผลิตภัณฑ์และวิศวกรรมที่จะต้องประเมินผลกระทบในเชิงปริมาณแต่ทีมจำเป็นต้องปลูกฝังวัฒนธรรมแห่งการทดลองและใส่เข้าไปในทุกขั้นตอนของกระบวนการพัฒนาผลิตภัณฑ์เพื่อสร้างความมั่นใจ
เราได้ร่วมมือกับ Reforge เพื่อสร้างคู่มือที่ครอบคลุมเกี่ยวกับการทดลองที่นำโดยผลิตภัณฑ์ โดยมีข้อมูลเชิงลึกและคำแนะนำจากผู้เชี่ยวชาญในสาขานี้ คู่มือนี้จะช่วยให้ทีมผลิตภัณฑ์และวิศวกรรมสร้างโปรแกรมการทดลองและปลดล็อกศักยภาพสูงสุดของผลิตภัณฑ์ของตน ในโพสต์นี้ เราจะให้ภาพรวมเกี่ยวกับสิ่งที่คาดหวังในคู่มือนี้
ดาวน์โหลดคู่มือฉบับเต็ม— สร้างด้วยความมั่นใจ: คำแนะนำของคุณในการปรับขนาดการทดลองที่นำโดยผลิตภัณฑ์ — เพื่อเรียนรู้วิธีสร้างวัฒนธรรมการทดลอง ทำความเข้าใจแนวทางปฏิบัติของการทดลอง จัดลำดับความสำคัญของแผนงานการทดลองของคุณ และอื่นๆ
ประเด็นที่สำคัญ
- การทดลองเป็นสิ่งจำเป็นสำหรับทีมผลิตภัณฑ์ในการช่วยประเมินผลกระทบของงาน ชี้แจงกลยุทธ์ผลิตภัณฑ์ และลดความเสี่ยงในการลงทุนผลิตภัณฑ์
- การทดลองยังช่วยผู้นำผลิตภัณฑ์เชื่อมโยงงานของพวกเขาเข้ากับเป้าหมายของบริษัทที่กว้างขึ้น เช่น การเพิ่มโอกาสในการสร้างรายได้หรือการรักษาลูกค้า
- การสร้างวัฒนธรรมแห่งการทดลองเกี่ยวข้องกับการเปลี่ยนกรอบความคิดพื้นฐาน ตลอดจนระบบและกระบวนการที่เป็นรูปธรรมเพื่อสนับสนุนความเร็วในการเรียนรู้ของคุณ ไม่ใช่แค่การจัดส่งที่รวดเร็วเท่านั้น
- ในการเริ่มต้นเส้นทางการทดลองของคุณ ให้เริ่มต้นเล็ก ๆ กับทีมเดียวก่อนที่จะขยายเป็นทั้งองค์กร
- รักษาแชมป์ผู้บริหารที่สามารถจัดหาทรัพยากรและช่วยเหลือในการสร้างช่องทางสำหรับการสื่อสารแบบเปิดและการทำงานร่วมกันระหว่างแผนกต่างๆ
- เรียนรู้เพิ่มเติมเกี่ยวกับการตั้งค่าโปรแกรมการทดลองแรกของคุณในคู่มือการทดลองที่นำโดยผลิตภัณฑ์
เหตุใดการทดลองจึงมีความสำคัญ
ในสภาพแวดล้อมการแข่งขันในปัจจุบัน การทดลองไม่ใช่ทางเลือกสำหรับทีมผลิตภัณฑ์ เป็นสิ่งที่ช่วยให้ทีมสร้างผลิตภัณฑ์นวัตกรรมที่ประสบความสำเร็จและเชื่อมโยงงานของพวกเขาเข้ากับองค์กรที่กว้างขึ้น
Saleem Malkana ผู้บริหารใน Residence ที่ Reforge อธิบายว่าการทดลองช่วยให้ทีมผลิตภัณฑ์วัดผลกระทบของงานและปรับปรุงกลยุทธ์ผลิตภัณฑ์ได้ “ทีมผลิตภัณฑ์ที่ดีที่สุดรู้ดีว่าสิ่งที่สำคัญจริงๆ ไม่ใช่แค่การส่งมอบผลลัพธ์เหล่านั้น แต่เป็นสิ่งที่ขับเคลื่อนผลลัพธ์” เขาอธิบาย
ในการวัดผลกระทบของการเปลี่ยนแปลงผลิตภัณฑ์ ทีมจำเป็นต้องพัฒนาสมมติฐาน ทำการทดลอง และประเมินผลลัพธ์ พวกเขาสามารถใช้ผลการทดลองเพื่อกำหนดกลยุทธ์ผลิตภัณฑ์ในอนาคตได้
การทดสอบยังเป็นวิธีการลดความเสี่ยงในการเปลี่ยนแปลงผลิตภัณฑ์อีกด้วย ทีมผลิตภัณฑ์สามารถประเมินผลกระทบจากการตัดสินใจเกี่ยวกับผลิตภัณฑ์ก่อนที่จะเผยแพร่ต่อผู้ใช้ทุกคน ซึ่งอาจนำไปสู่ความผิดพลาดที่มีราคาแพง
Wil Pong หัวหน้าฝ่ายผลิตภัณฑ์สำหรับการทดลองแอมพลิจูด ให้เหตุผลว่าการทดลองที่นำโดยผลิตภัณฑ์นั้นมอบนวัตกรรมที่เร็วขึ้นโดยไม่รบกวนวงจรการพัฒนาของวิศวกรรมโดยใช้เครื่องมือระดับพื้นผิวมากขึ้น เช่น แนวทาง WYSIWYG
ในอดีต มีเพียงบริษัทขนาดใหญ่อย่าง Netflix เท่านั้นที่สามารถนำเสนอประสบการณ์ที่ปรับให้เหมาะกับคุณและทดลองใช้อินเทอร์เฟซผลิตภัณฑ์หรือเครื่องมือแนะนำต่างๆ ได้ ขณะนี้ ด้วยแอปพลิเคชันใหม่อย่าง Amplitude Experiment องค์กรทุกขนาดสามารถทำซ้ำและปรับแต่งผลิตภัณฑ์ของตนได้ตามเวลาจริงตามสิ่งที่ผู้ใช้ต้องการ
การทดลองที่นำโดยผลิตภัณฑ์ช่วยให้ทีมผลิตภัณฑ์สามารถนำเสนอการทดสอบที่ตรงเป้าหมายสูงในผลิตภัณฑ์ทั้งหมดของพวกเขาโดยใช้แฟล็กคุณลักษณะ ซึ่งช่วยให้ทีมสามารถควบคุมการเปิดหรือปิดประสบการณ์ได้อย่างสมบูรณ์ สิ่งนี้ช่วยให้ทีมสามารถ "ส่งมอบการทดลองที่ตรงเป้าหมายและการเปิดตัวฟีเจอร์โดยใช้กระบวนการและเทคโนโลยีเดียวกันกับที่ขับเคลื่อนการพัฒนาผลิตภัณฑ์ที่เหลือ [ของพวกเขา]" ซึ่งท้ายที่สุดจะขับเคลื่อนนวัตกรรมอย่างรวดเร็วโดยไม่รบกวนทีมเทคนิค Wil อธิบาย
การทดลองถือเป็นสิ่งสำคัญเช่นกันสำหรับผู้นำด้านผลิตภัณฑ์ เมื่อพิจารณาจากการเปลี่ยนแปลงล่าสุดในความรับผิดชอบ Bhavik Patel ผู้ก่อตั้งและกรรมการผู้จัดการของ CAUSL อธิบายว่าองค์กรต่าง ๆ ได้เปลี่ยนจากแนวทางที่อิงตามผลลัพธ์ไปสู่แนวทางที่อิงตามผลลัพธ์ ทำให้มีการตรวจสอบผู้นำผลิตภัณฑ์มากขึ้น แม้ว่าการวัด ROI ของทีมผลิตภัณฑ์จะทำได้ยาก (โดยทั่วไปแล้วองค์กรจะใช้จำนวนพนักงานหรือชั่วโมงวิศวกรรม) แต่การติดตามผลกระทบของผลิตภัณฑ์ผ่านการทดลองจะช่วยให้ทีมผลิตภัณฑ์เชื่อมโยงงานของตนกับเป้าหมายของบริษัทที่กว้างขึ้นได้
เรียนรู้วิธีสร้างและดำเนินการระบบการทดลองเชิงกลยุทธ์ด้วยหลักสูตรการทดลอง + การทดสอบของ Reforge
การสร้างวัฒนธรรมแห่งการทดลองหมายความว่าอย่างไร
วัฒนธรรมการทดลองควรเกี่ยวข้องกับทุกส่วนขององค์กร เพื่อสร้างวัฒนธรรมดังกล่าว องค์กรจำเป็นต้องผ่านการเปลี่ยนแปลงความคิดและสร้างระบบและกระบวนการที่เป็นรูปธรรมเพื่อสนับสนุนความเร็วของการเรียนรู้ ไม่ใช่แค่การจัดส่งที่รวดเร็วเท่านั้น
Saleem อธิบายว่าวัฒนธรรมของการทดลองไม่ใช่เรื่องทางเทคนิคเพียงอย่างเดียว เป็นการรวมกันของ:
- ผู้คน: สมาชิกในทีมขับเคลื่อนด้วยข้อมูล
- กระบวนการและการสื่อสารแบบบูรณาการ: การทดลองเป็นส่วนหนึ่งของกระบวนการพัฒนาผลิตภัณฑ์พร้อมการสื่อสารที่ดีระหว่างทีม
- เทคโนโลยี: องค์กรใช้แพลตฟอร์มที่ช่วยให้สามารถทดลองได้
ตามหลักการแล้ว การทดลองจะมีอยู่ในทุกระดับขององค์กร โดยเน้นที่ระดับทีม—นั่นคือสิ่งที่สร้างรากฐานสำหรับความคล่องตัวและความสามารถในการปรับตัว การทดสอบควรเป็นส่วนหนึ่งของการดำเนินงานประจำวันด้วย ดังนั้นทีมจะได้รับข้อมูลเชิงลึกที่สม่ำเสมอ ซึ่งสามารถใช้เพื่อปรับปรุงผลิตภัณฑ์ได้
ในการสร้างวัฒนธรรมแห่งการทดลอง ทีมควรพัฒนากรอบความคิดที่รวบรวมความอยากรู้อยากเห็นและ "ความล้มเหลว" เนื่องจากทั้งสองอย่างนี้เป็นกลไกในการเรียนรู้ เพื่อสร้างโมเมนตัมในการทดลอง การรักษาแชมป์ผู้บริหารก็เป็นสิ่งสำคัญเช่นกัน
ผู้บริหารที่ซื้อการทดลองจะช่วยจัดหาทรัพยากร เช่น เวลา งบประมาณ และเครื่องมือต่างๆ พวกเขายังช่วยในการสร้างช่องทางสำหรับการสื่อสารแบบเปิดและการทำงานร่วมกันระหว่างแผนกต่างๆ
อ่านเพิ่มเติมในคู่มือฉบับเต็ม
วิธีเริ่มต้นเส้นทางการทดลองของคุณ
การนำโปรแกรมการทดลองไปใช้ในองค์กรต้องใช้เวลา ต่อไปนี้เป็นแนวทางปฏิบัติที่ดีที่สุดเมื่อคุณเริ่มต้น
เริ่มต้นจากขนาดเล็กและขยายขนาด
เป้าหมายสูงสุดคือการนำการทดลองไปใช้ทั่วทั้งองค์กร อย่างไรก็ตาม องค์กรควรเริ่มต้นจากขนาดเล็กด้วยการทดสอบที่มีความเสี่ยงต่ำในทีมเดียวก่อนที่จะขยายขนาด
Saleem แนะนำให้จัดตั้ง "ศูนย์ความเป็นเลิศ" หนึ่งทีม: ทีมเดียวที่ควรตรวจสอบชุดการทดลองพื้นฐานและสร้างขึ้นจากที่นั่น Elena Verna ที่ปรึกษาด้านการเติบโตและ Interim Growth Exec อธิบายว่า “ทีมเดียวต้องเรียนรู้วิธีทดสอบ วิธีเรียนรู้ และวิธีชนะก่อน”
เธอกล่าวต่อว่า “เมื่อทีมนั้นพัฒนาทักษะการทดลองและกรอบความคิดแล้ว พวกเขาควรพยายามทำให้การเข้าถึงการทดสอบและการเรียนรู้เป็นประชาธิปไตย ด้วยวิธีนี้ทั้งองค์กรสามารถเรียนรู้วิธีที่จะชนะด้วยการทดลอง” ท้ายที่สุดแล้ว สมาชิกในทีมจากทุกแผนกควรจะสามารถเรียกใช้การทดสอบเพื่อแจ้งการตัดสินใจในแต่ละวันของพวกเขาได้
Bhavik แนะนำให้ทีมเริ่มต้นด้วยการทดสอบที่มีความเสี่ยงต่ำ: "ฉันจะไม่แนะนำให้เริ่มต้นด้วยการทดสอบราคาที่ซับซ้อน เป็นต้น แต่มันเป็นเป้าหมายที่ดีในการทำงานให้สำเร็จ"
นอกจากนี้เขายังเตือนไม่ให้ติดอยู่กับตัวเลขที่ไม่สมจริง บริษัทส่วนใหญ่ไม่ควรทำการทดสอบเป็นพันๆ ครั้ง แทนที่จะเป็นเช่นนั้น "เป้าหมายควรดำเนินการ [การทดสอบ] มากกว่าที่ทำในไตรมาสหรือปีที่แล้ว" เขากล่าว
คิด ตรวจสอบ จัดลำดับความสำคัญ
การดำเนินการทดสอบที่ไม่จำเป็นทำให้สิ้นเปลืองทรัพยากร ดังนั้นทีมจึงต้องเลือกว่าจะทำการทดสอบใด
เริ่มต้นแนวคิดของคุณด้วยแผนผังเมตริก (ไดอะแกรมที่แสดงให้เห็นว่าองค์ประกอบทั้งหมดของผลิตภัณฑ์ขึ้นไปสู่เป้าหมายของบริษัทได้อย่างไร) หรือไดอะแกรมดวงอาทิตย์ (ภาพรวมของเวิร์กสตรีมขององค์กรของคุณ) การทบทวนไดอะแกรมเหล่านั้นจะช่วยให้คุณทราบว่าควรมุ่งเน้นที่ความพยายามในการทดลองของคุณที่ใด
ในการทดสอบแนวคิด ก่อนอื่นให้ตรวจสอบแนวคิดการทดสอบเพื่อระบุว่าแนวคิดใดที่ควรค่าแก่การติดตาม ในการตรวจสอบ คุณสามารถใช้การทดสอบประตูทาสี การวิจัยบนโต๊ะ หรือตรวจสอบผลลัพธ์จากการทดลองที่คล้ายกัน
จากนั้น พิจารณาเวลาในการทำความเข้าใจข้อมูลเชิงลึกจากการทดสอบที่เป็นไปได้แต่ละครั้ง Elena เน้นย้ำว่าทีมควรจัดลำดับความสำคัญของความเร็วของการเรียนรู้และพิจารณาว่าใช้เวลานานเท่าใดในการ สร้างการทดสอบ ไม่ใช่แค่ดำเนินการ Saleem ยังแนะนำให้แบ่งความท้าทายใหญ่ ๆ ออกเป็นสมมติฐานเล็ก ๆ ที่ทดสอบได้เพื่อรับข้อเสนอแนะที่รวดเร็วขึ้น
ปัจจัยอื่นๆ ที่ต้องคำนึงถึงได้แก่:
- ปริมาณที่จุดต่างๆ ในผลิตภัณฑ์ของคุณ เนื่องจากคุณต้องการการเข้าชมที่เพียงพอเพื่อเรียกใช้การทดสอบ
- การทดสอบที่คุณต้องการเรียกใช้สามารถวัดได้ด้วยเครื่องมือวิเคราะห์ที่คุณมีหรือไม่
เมื่อคุณได้ตรวจสอบแนวคิดการทดสอบของคุณแล้ว ให้จัดลำดับความสำคัญของการทดสอบที่จะดำเนินการตาม:
- ความสามารถในการทดสอบของคุณ
- คุณคาดว่าการทดสอบจะมีผลกระทบมากน้อยเพียงใด
- คุณมั่นใจแค่ไหนว่าจะได้ผลลัพธ์ที่ต้องการ
- ความพยายามที่เกี่ยวข้องในการดำเนินการทดสอบ
ออกแบบการทดสอบของคุณโดยใช้แนวทางปฏิบัติที่ดีที่สุด
ภวิคอธิบายว่าการทดลองที่ออกแบบมาอย่างดีมีรากฐานมาจากวิธีการทางวิทยาศาสตร์ สามารถแบ่งออกเป็นขั้นตอนต่อไปนี้: การวางแผนก่อนการทดลอง การติดตามระหว่างการทดลอง และการวิเคราะห์หลังการทดลอง
เมื่อคุณตรวจสอบความถูกต้องของแนวคิดการทดสอบและเลือกการทดสอบที่จะจัดลำดับความสำคัญได้แล้ว คุณจะต้องวางแผนการทดสอบของคุณ บันทึกเหตุผลในการเรียกใช้การทดสอบ ระบุอย่างชัดเจนถึงสิ่งที่กำลังทดสอบและแก้ไข ซึ่งอาจเป็นการเปลี่ยนแปลงการออกแบบหรือคุณสมบัติหรือประสบการณ์ใหม่
สร้างสมมติฐานและกำหนดเมตริกผลิตภัณฑ์หรือ KPI ที่ชัดเจนสำหรับการทดสอบของคุณ ตัดสินใจเกี่ยวกับขั้นตอนต่อไปตามผลลัพธ์ที่เป็นไปได้ กำหนดว่าจะเกิดอะไรขึ้นเมื่อแต่ละตัวแปรชนะหรือหากการทดสอบไม่ถึงนัยสำคัญทางสถิติ
เจาะลึกการวางแผนก่อนการทดสอบในคู่มือฉบับเต็ม
ในระหว่างการทดสอบ ให้สร้างแดชบอร์ดการวิเคราะห์เพื่อติดตามการทดสอบอย่างต่อเนื่อง หลังการทดลอง วิเคราะห์ผลลัพธ์และสรุปผลลัพธ์ จากนั้นทีมสามารถเดินหน้าตามขั้นตอนต่อไปที่กำหนดไว้ล่วงหน้าได้
สร้างด้วยความมั่นใจ
สำหรับคำแนะนำเพิ่มเติมเกี่ยวกับวิธีการเรียกใช้โปรแกรมการทดลองที่ประสบความสำเร็จ ดาวน์โหลดคู่มือการทดลองที่นำโดยผลิตภัณฑ์
ในคำแนะนำ คุณจะได้เรียนรู้วิธีการ:
- ตัดสินใจว่าจะสร้างหรือซื้อแพลตฟอร์มการทดสอบของคุณโดยใช้เฟรมเวิร์กจาก Chad Sanderson
- วัดผลและประเมินผลการทดสอบของคุณ
- ความสามารถที่สำคัญใดที่คุณต้องการเพื่อขยายการทดลองที่นำโดยผลิตภัณฑ์
- วิธีใช้ Amplitude Experiment เพื่อทำการทดลองในระดับต่างๆ
รับคู่มือวันนี้