การสร้างข้อมูลแบบบริการตนเองและวัฒนธรรมการทดลองเพื่อการตัดสินใจที่ดีขึ้น

เผยแพร่แล้ว: 2022-08-26

เมื่อพูดถึงการออกแบบแอพหรือเว็บไซต์ ความเรียบง่ายนั้นดีที่สุด การนำผู้ใช้จากจุด A ไปยังจุด B ด้วยขั้นตอนน้อยที่สุดและด้วยอินเทอร์เฟซที่สะอาดที่สุดถือเป็นเครื่องหมายของประสบการณ์ที่โดดเด่น แต่แม้การเดินทางของผู้ใช้ที่ตรงไปตรงมาที่สุดก็สร้างชุดข้อมูลเหตุการณ์ที่ต้องจัดเรียงและตีความ ด้วยเครื่องมือที่เหมาะสม ข้อมูลดิบนี้จะกลายเป็นขุมทรัพย์ของข้อมูลที่สามารถนำธุรกิจของคุณไปสู่ระดับต่อไป

ฉันเป็นผู้จัดการผลิตภัณฑ์อาวุโสของ SmartRecruiters ซึ่งเป็นซัพพลายเออร์ซอฟต์แวร์ที่ช่วยให้บริษัทต่างๆ สามารถดำเนินโครงการจัดหาผู้มีความสามารถ เช่น เครื่องจักรการตลาดและการขายที่ทรงพลัง ชุดการจัดหาผู้มีความสามารถ B2B ของเราทำให้การจ้างงานเป็นเรื่องง่าย และช่วยให้ธุรกิจค้นหาและจ้างคนที่พวกเขาต้องการ

ด้วยเครื่องมือที่เหมาะสม ข้อมูลดิบจะกลายเป็นขุมทรัพย์ของข้อมูลที่สามารถนำธุรกิจของคุณไปสู่ระดับต่อไป

ส่วนประกอบล่าสุดของผลิตภัณฑ์ B2B ที่เป็นเรือธงของเราคือ Smartr ซึ่งเป็นโซลูชัน B2C ของเรา Smartr เป็นแพลตฟอร์มออนไลน์ที่ใช้งานง่ายซึ่งตรงกับผู้หางานที่มีนายจ้างมากกว่า 4,000 ราย เรามีผู้ใช้งานอยู่สองล้านคนที่กำลังมองหางานออนไลน์ สร้างงานหลายร้อยล้านงาน

ทำให้ความรู้สึกของการเดินทางของผู้ใช้เป็นไปไม่ได้

เมื่อฉันเข้าร่วมบริษัทในปี 2020 การทำความเข้าใจเส้นทางของผู้ใช้ของเรานั้นแทบจะเป็นไปไม่ได้เลย เรากำลังแตะลงในฐานข้อมูลเหตุการณ์ของเราโดยตรง และพยายามทำให้เห็นภาพสิ่งต่าง ๆ โดยใช้ SQL และ Tableau เราเขียนข้อความค้นหาสำหรับทุกเหตุการณ์ที่เราวิเคราะห์และป้อนผลลัพธ์ลงใน Tableau ต้องใช้เวลามาก และเรากำลังกระโดดข้ามห่วงเพื่อให้ข้อมูลทำงาน เพราะมีชิ้นส่วนที่เคลื่อนไหวมากเกินไป

ในขณะนั้น Smartr ยังอยู่ในช่วงเริ่มต้น—และทีมของเราก็ใหม่เช่นกัน ขณะที่เราเพิ่มคนให้ทำงานบน Smartr มากขึ้น เราก็มองหาเครื่องมือใหม่ๆ ที่สามารถช่วยเราปรับปรุงไปพร้อมๆ กัน เราต้องการวิเคราะห์และแสดงภาพเหตุการณ์เพิ่มเติม และสร้างการรายงานของเรา แต่เครื่องมือการแสดงภาพของเราไม่เหมาะสำหรับการวิเคราะห์การติดตามกิจกรรม ฉันเริ่มมองหาโซลูชันที่สมบูรณ์แบบเพื่อช่วยให้เราเข้าใจพฤติกรรมของผู้ใช้ได้ดีขึ้น

ขยายบนแพลตฟอร์มที่เหมาะสม

ระหว่างการวิจัยขั้นพื้นฐานเกี่ยวกับเครื่องมือวิเคราะห์ ฉันพบว่าฝั่งองค์กรของ SmartRecruiters กำลังใช้ Amplitude Analytics เวอร์ชันฟรี เนื่องจากเรามีมันอยู่แล้วในบ้าน ฉันจึงตัดสินใจลองใช้และลงทะเบียนเข้าร่วมเวิร์กชอปกับผู้จัดการบัญชีของ Amplitude

แม้จะมีคุณสมบัติจำกัดของแพ็คเกจ Starter ฟรี แต่ก็เห็นได้ทันทีว่า Analytics เป็นเครื่องมือที่ดีที่สุดในตลาดสำหรับการติดตามเหตุการณ์ มันผสานรวมกับฐานข้อมูลของเราอย่างราบรื่น และอินเทอร์เฟซแบบชี้แล้วคลิก เครื่องมือสร้างภาพในตัว และเทมเพลตรายงานช่วยให้เราแปลข้อมูลดิบเป็นข้อมูลที่เข้าใจง่าย ในเวลาไม่ถึงนาที เราสามารถถามและตอบคำถามที่เคยใช้เวลาครึ่งวันในการกำหนด แยก และตีความโดยใช้แบบสอบถาม SQL และ Tableau

ฉันสรุปได้อย่างรวดเร็วว่าเราไม่ได้ใช้ Analytics อย่างเต็มประสิทธิภาพ และสนับสนุนการย้ายของเราไปยังระดับที่ต้องชำระเงินของแพลตฟอร์มหนึ่ง เพื่อให้เราสามารถใช้ประโยชน์จากพลังอย่างเต็มที่

การตรวจสอบคุณสมบัติใหม่ในเวลาจริง

เมื่อเราเพิ่มการใช้งาน Analytics ได้แนะนำการตรวจสอบแบบเรียลไทม์ที่ช่วยให้เราทดสอบคุณลักษณะใหม่ได้ในวินาทีที่เราเพิ่มลงในเว็บไซต์หรือแอปของเรา ด้วย ID ผู้ใช้ที่มีอยู่ เราสามารถทดสอบโปรเจ็กต์แบบเรียลไทม์และดูว่าเหตุการณ์ใดที่กำลังเริ่มทำงานโดยไม่ต้องสร้างสภาพแวดล้อมการทดสอบหรือรอให้ผู้ใช้และลูกค้าเข้าสู่ระบบ

ข้อมูลแบบเรียลไทม์ทำให้ทีมและผู้ใช้มีความสุขมากขึ้น เนื่องจากมีอุปสรรคน้อยลงในวงจรการพัฒนาและการถอดรหัสการเดินทางของลูกค้า

ภายในไม่กี่นาทีหลังจากเปิดตัวคุณลักษณะใหม่ ฉันสามารถบอกวิศวกรของฉันได้ว่ามันกำลังเรียกใช้เหตุการณ์ที่ต้องการหรือไม่ และพวกเขาสามารถแก้ปัญหาและแก้ไขปัญหาได้ทันที นี่เป็นวิธีการทำงานที่ชาญฉลาดยิ่งขึ้น (ขออภัยในความไม่สะดวก) และทีมของฉันและผู้ใช้ของเราก็มีความสุขมากขึ้น เนื่องจากมีอุปสรรคน้อยลงในวงจรการพัฒนาของเราและการถอดรหัสเส้นทางของลูกค้า

การทดลองสู่ระดับใหม่

Analytics มีประสิทธิภาพ และเมื่อเราขยายทีม Smartr เราก็เริ่มมองหาการทำสิ่งต่างๆ มากขึ้นด้วยข้อมูลเหตุการณ์ คำตอบที่สมเหตุสมผลคือการเพิ่มการทดสอบ A/B เพื่อให้เราสามารถลองใช้เว็บไซต์และแอปเวอร์ชันต่างๆ ได้

ในการซื้อแพลตฟอร์มทดลองแยกต่างหากหรือสร้างของเราเองนั้นมีค่าใช้จ่ายแสนดอลลาร์ต่อปีอย่างง่ายดาย จากนั้นเราจะต้องหาวิธีที่จะรวมแพลตฟอร์มใหม่เข้ากับข้อมูลและกิจกรรมของเรา

แทนที่จะมองหาโซลูชันที่แยกจากกัน เราหันไปใช้ Amplitude Experiment ซึ่งเป็นโซลูชันการทดสอบและการจัดการคุณลักษณะที่มีประสิทธิภาพ ซึ่งช่วยให้เราทดลองใช้ฟังก์ชันการทำงานและการปรับปรุงอินเทอร์เฟซได้ การทดสอบผสานรวมกับเครื่องมือ Analytics อย่างสมบูรณ์ในขณะที่นำเสนอเวิร์กโฟลว์การทดสอบที่สมบูรณ์

ความสำเร็จที่ใหญ่ที่สุดอย่างหนึ่งของ Experiment คือการเปิดตัวคุณลักษณะบุ๊กมาร์กของ Smartr เมื่อผู้สมัครพบประกาศที่น่าสนใจ พวกเขาสามารถตั้งค่าสถานะนั้น ค้นหางานต่อ และกลับไปสมัครในภายหลัง เราทดลองกับไอคอนบุ๊กมาร์กใหม่สองเวอร์ชัน ได้แก่ รูปดาวและหัวใจ นอกเหนือจากไอคอนบุ๊กมาร์กที่มีอยู่เป็นตัวควบคุม และเห็นว่าผู้ใช้ชอบใจ

เราทำการทดสอบโดยกำหนด 1/3 ของการรับส่งข้อมูลของเราให้กับแต่ละตัวแปร เราสนใจที่จะทดสอบอัตราการบุ๊กมาร์ก ซึ่งเป็นอัตรา Conversion ของผู้ใช้ที่พบกับรูปแบบต่างๆ และจำนวนผู้ที่บุ๊กมาร์กงาน อัตราการบุ๊กมาร์กสำหรับปุ่มหัวใจเพิ่มขึ้นเมื่อเทียบกับตัวเลือกการควบคุม 46.6% ในขณะที่อัตราการบุ๊กมาร์กสำหรับปุ่มดาวเพียง 8.78% เรายังต้องการทดสอบอัตราการสมัคร ซึ่งเป็นเปอร์เซ็นต์ของงานที่คั่นหน้าซึ่งผู้สมัครลงเอยด้วยการสมัคร สำหรับปุ่มหัวใจ อัตรานั้นเพิ่มขึ้น 58% เมื่อเทียบกับปุ่มควบคุม ในขณะที่สำหรับปุ่มรูปดาว การปรับปรุงเพียง 23.4%

แอมพลิจูดยืนยันความสำคัญทางสถิติของการปรับปรุงเหล่านี้หลังจากทำการทดสอบไปแล้วหกวัน ดังนั้น การตัดสินใจเปลี่ยนปุ่มบุ๊กมาร์กแบบเก่าเป็นหัวใจจึงเป็นเรื่องง่าย

แน่นอนว่าเราถามคำถามเพิ่มเติม ผู้ใช้จะมีปฏิกิริยาอย่างไรหากเราเปลี่ยนประสบการณ์การเริ่มต้นใช้งานบางส่วนหรือสร้างประสบการณ์ใหม่ทั้งหมด พวกเขาจะมีส่วนร่วมกับเนื้อหามากขึ้นหรือไม่? สมัครงานเพิ่ม? และสิ่งนี้จะส่งผลกระทบต่อ KPI ของเราอย่างไร เราพบว่าตัวเองกำลังถามและตอบคำถามที่เกี่ยวข้องกับผู้ชมมากขึ้น

วัฒนธรรมข้อมูลที่กำลังเติบโต

เป็นเรื่องน่าตื่นเต้นที่ได้เห็นวัฒนธรรมข้อมูลของเราเติบโตขึ้น ในช่วง 12 เดือนที่ผ่านมา เราพบว่ามีการนำไปใช้เพิ่มขึ้น 950% และแทนที่จะเห็นการเพิ่มขึ้นอย่างรวดเร็วในตอนแรกหลังจากการว่าจ้างและออกจากงาน การมีส่วนร่วมยังคงสูง นำเสนอในรูปแบบข้อมูลแบบบริการตนเอง ซึ่งผู้คนรู้สึกมั่นใจมากขึ้นเกี่ยวกับข้อมูลที่พวกเขาเห็นและความสามารถในการตัดสินใจตามข้อมูลนั้น

ฉันใช้ Analytics ทุกวันเพื่อสร้างแผนภูมิใหม่และนำเสนอต่อทีม โดยเป็นแบบอย่าง ทุกคนตั้งแต่ทีมผลิตภัณฑ์ไปจนถึงนักออกแบบและวิศวกรสามารถสร้างแผนภูมิและเจาะลึกข้อมูลที่ต้องการได้ทุกเมื่อที่ต้องการ แม้จะไม่ใช่ทุกคนที่ใช้ Analytics ทุกวัน แต่ก็มีคนเข้ามาถามฉันหรือขอคำค้นหาน้อยลง และทีมก็สามารถทำงานได้เร็วขึ้น

เนื่องจากการเติบโตนี้ ฉันจึงเป็นผู้เข้ารอบสุดท้ายรางวัล Amplitude Pioneer Awards ในหมวดหมู่รางวัล Data Culture Award รู้สึกดีมากที่งานของเราได้รับการยอมรับจากภายนอกและภายใน

ความยืดหยุ่นในการปรับแต่ง Smartr

เครื่องมือวิเคราะห์ใดๆ จะให้ข้อมูลเชิงลึกเพื่อช่วยในการตัดสินใจโดยใช้ข้อมูลมากขึ้น แต่ความยืดหยุ่นของ Analytics จะแยกความแตกต่างออกจากกัน ทำให้การวิเคราะห์ข้อมูลเป็นเรื่องง่าย แทนที่จะใช้เวลา ความพยายาม และทรัพยากรเพื่อสร้างสิ่งที่เราต้องการตั้งแต่เริ่มต้น ทุกอย่างก็พร้อมที่จะใช้และแก้ไข

ทีมของฉันได้ปรับปรุงข้อเสนอผลิตภัณฑ์ของเราและปรับแต่งประสบการณ์ผู้ใช้ของเราอย่างละเอียด เราได้สร้างชุมชนผู้หางานที่เฟื่องฟูโดยใช้แพลตฟอร์มของเราเพื่อก้าวไปสู่อาชีพต่อไปหรือเป็นอันดับแรก เราสามารถสร้างเหตุการณ์ใหม่และติดตามและวิเคราะห์ได้ทันทีโดยใช้แดชบอร์ดในตัว เราได้เริ่มทำการตัดสินใจตามข้อมูลและมุ่งเน้นไปที่การตรวจสอบประสิทธิภาพแทนที่จะเขียนคำค้นหาและจัดการเครื่องมือวิเคราะห์ของเรา ง่ายต่อการดูว่าผู้ใช้ต้องการคุณลักษณะใดและปฏิบัติตามเส้นทางของพวกเขาขณะที่พวกเขานำทางจากหน้าแรกไปยังหน้าอื่นๆ บนเว็บไซต์ของเรา

เมื่อสร้างผลิตภัณฑ์ใหม่ คุณต้องตอบสนองอย่างรวดเร็วและตรวจสอบว่ารายละเอียดคุณสมบัติเหตุการณ์ทั้งหมดถูกต้อง การผสมผสานระหว่าง Analytics และ Experiment ช่วยให้มั่นใจว่าทีม Smartr ยังคงสร้างผลิตภัณฑ์ที่วัดผลได้ในระดับองค์กรของเรา

ตัวชี้วัดผลิตภัณฑ์ CTA