Daha İyi Karar Vermek için Self Servis Veri ve Deney Kültürü Oluşturma

Bir uygulama veya web sitesi tasarlamaya gelince, basitlik en iyisidir. Kullanıcıları A noktasından B noktasına en az adımda ve en temiz arayüzle ulaştırmak olağanüstü bir deneyimin işaretidir. Ancak en basit kullanıcı yolculuğu bile, sıralanması ve yorumlanması gereken bir dizi olay verisi oluşturur. Doğru araçlarla, bu ham veriler, işinizi bir sonraki seviyeye taşıyabilecek bir bilgi hazinesi haline gelir.

Şirketlerin yetenek kazanım programlarını yüksek güçlü bir pazarlama ve satış makinesi gibi yürütmelerini sağlayan bir yazılım tedarikçisi olan SmartRecruiters'ta Kıdemli Ürün Müdürüyüm. B2B yetenek kazanımı paketimiz, işe almayı kolaylaştırır ve işletmelerin ihtiyaç duydukları kişileri bulmasına ve işe almasına yardımcı olur.

Doğru araçlarla ham veriler, işinizi bir sonraki seviyeye taşıyabilecek bir bilgi hazinesi haline gelir.

Amiral gemisi B2B ürünümüzün yeni bir tamamlayıcısı B2C çözümümüz Smartr'dır. Smartr, iş arayanları 4.000'den fazla işverenle eşleştiren, kullanıcı dostu bir çevrimiçi platformdur. Yüz milyonlarca etkinlik oluşturan, çevrimiçi iş arayan iki milyon aktif kullanıcımız var.

Kullanıcı yolculuklarını anlamlandırmak imkansızdı

2020'de şirkete katıldığımda, kullanıcılarımızın yolculuklarını anlamlandırmak neredeyse imkansızdı. Doğrudan olay veritabanımıza giriyor ve SQL ve Tableau kullanarak bir şeyleri görselleştirmeye çalışıyorduk. Analiz ettiğimiz her olay için sorgular yazdık ve sonuçları Tableau'ya aktardık. Çok zaman alıcıydı ve çok fazla hareketli parça olduğu için verilerin çalışmasını sağlamak için çemberler arasında atlıyorduk.

O sırada Smartr emekleme dönemindeydi ve ekibimiz de yeniydi. Smartr üzerinde çalışacak daha fazla insan ekledikçe, aynı anda gelişmemize yardımcı olabilecek yeni araçlara da bakıyorduk. Daha fazla olayı analiz edip görselleştirmek ve raporlamamızı oluşturmak istedik, ancak görselleştirme araçlarımız olay izleme analizi için uygun değildi. Kullanıcı davranışını daha iyi anlamamıza yardımcı olacak mükemmel çözümü aramaya başladım.

Doğru platformda genişleme

Analiz araçlarıyla ilgili bazı temel araştırmalar sırasında SmartRecruiters'ın kurumsal tarafının Amplitude Analytics'in ücretsiz sürümünü kullandığını keşfettim. Zaten kendi bünyemizde bulundurduğumuz için denemeye karar verdim ve Amplitude'ün hesap yöneticileriyle bazı atölye çalışmalarına kaydoldum.

Ücretsiz Başlangıç ​​paketinin sınırlı özelliklerine rağmen, Analytics'in olay takibi için piyasadaki en iyi araç olduğu hemen görüldü. Veritabanımızla sorunsuz bir şekilde bütünleşir ve üzerine tıklamalı arayüzü, yerleşik görselleştirme araçları ve rapor şablonları, ham verileri anlaşılması kolay bilgilere dönüştürmemize olanak tanır. Bir dakikadan daha kısa bir sürede, SQL sorguları ve Tableau kullanarak formüle edilmesi, çıkarılması ve yorumlanması yarım gün süren soruları sorabilir ve yanıtlayabiliriz.

Kısa sürede Analytics'i tam kapasitesiyle kullanmadığımıza karar verdim ve tam gücünden yararlanabilmemiz için platformun ücretli katmanlarından birine geçişimizi savundum.

Yeni özellikleri gerçek zamanlı olarak izleme

Kullanımını artırırken, Analytics, yeni bir özelliği web sitemize veya uygulamamıza eklediğimiz anda test etmemize olanak tanıyan gerçek zamanlı izleme özelliğini kullanıma sundu. Mevcut bir kullanıcı kimliğiyle, bir projeyi gerçek zamanlı olarak test edebilir ve bir test ortamı oluşturmadan veya kullanıcıların ve müşterilerin oturum açmasını beklemeden hangi olayların tetiklendiğini görebiliriz.

Gerçek zamanlı veriler, geliştirme döngülerinde ve deşifre eden müşteri yolculuklarında daha az engel olduğu için ekipleri ve kullanıcıları daha mutlu eder.

Yeni bir özelliği başlattıktan sonra dakikalar içinde mühendislerime bunun istenen olayları tetikleyip tetiklemediğini söyleyebilirim ve onlar sorunu hemen giderip çözebilirler. Bu, daha akıllıca bir çalışma yöntemidir (kelime oyunu için kusura bakmayın) ve ekibim ve kullanıcılarımız daha mutlu çünkü geliştirme döngülerimizde ve müşteri yolculuklarının şifresini çözmemizde daha az engel var.

Deneyi yeni zirvelere taşımak

Analytics güçlüdür ve Smartr ekibini büyüttükçe etkinlik verileriyle daha fazlasını yapmaya başladık. Mantıklı cevap, web sitemizin ve uygulamamızın farklı sürümlerini deneyebilmemiz için A/B testimizi artırmaktı.

Ayrı bir deney platformu satın almak veya kendimizinkini inşa etmek kolayca yılda yüz bin dolara mal olacak ve sonra yeni platformu verilerimiz ve olaylarımızla entegre etmenin bir yolunu bulmamız gerekecek.

Ayrı bir çözüme bakmak yerine, işlevsellikleri ve arayüz geliştirmesini denememize olanak tanıyan sağlam bir deneme ve özellik yönetimi çözümü olan Amplitude Experiment'e döndük. Deneme, eksiksiz bir deneme iş akışı sunarken Analytics araçlarıyla tamamen entegre olur.

Experiment ile elde edilen en büyük başarılardan biri, Smartr'ın yer imi özelliğinin lansmanı oldu. Adaylar ilginç bir ilan bulduklarında, onu işaretleyebilir, iş aramaya devam edebilir ve daha sonra geri dönüp başvurabilirler. Bir kontrol olarak mevcut yer imi simgesine ek olarak, bir yıldız ve bir kalp olmak üzere yer imi simgesinin iki yeni sürümünü denedik. ve kullanıcıların bir kalbi tercih ettiğini gördüm.

Varyantların her birine trafiğimizin 1/3'ünü atayarak testi çalıştırdık. Farklı değişkenlere maruz kalan kullanıcıların dönüşüm oranı ve bunlardan kaçının bir işe yer işareti koyduğunu gösteren yer imi oranını test etmekle ilgilendik. Kalp düğmesi için işaretleme oranı, kontrol seçeneğine kıyasla %46,6 artarken, yıldız düğmesi için işaretleme oranı yalnızca %8,78 oranında arttı. Ayrıca, adayların başvurdukları yer imi eklenmiş işlerin yüzdesi olan başvuru oranını da test etmek istedik. Kalp düğmesi için bu oran kontrole kıyasla %58 artarken, yıldız düğmesi için iyileşme sadece %23.4 idi.

Amplitüd, deneyi çalıştırdıktan altı gün sonra bu iyileştirmelerin istatistiksel önemini doğruladı, bu nedenle eski yer imi düğmesini bir kalbe değiştirme kararı kolaydı.

Tabii daha sonra başka sorular da sorduk. İlk katılım deneyimimizin bir kısmını değiştirsek veya tamamen yeni bir tane oluştursak, kullanıcılar nasıl tepki verir? İçerikle daha fazla ilgilenirler mi? Daha fazla iş için başvurun mu? Ve bu, KPI'larımızı nasıl etkiler? Kendimizi hedef kitlemizle ilgili daha fazla soru sorarken ve cevaplarken bulduk.

Büyüyen bir veri kültürü

Veri kültürümüzün büyüdüğünü görmek heyecan verici. Son 12 ayda, benimsemede %950'lik bir artış gördük. Ve işe alıp işten ayrıldıktan sonra ilk ani bir artış görmek yerine, katılım yüksek kalır. İnsanların gördükleri veriler ve buna dayalı olarak karar verme yetenekleri konusunda kendilerini daha güvende hissettikleri bir self servis veri modelinde başlatıldı.

Analytics'i günlük olarak yeni grafikler oluşturmak ve bunları örnek olarak liderlik ederek ekibe sunmak için kullanıyorum. Ürün ekiplerinden tasarımcılara ve mühendislere kadar herkes, ihtiyaç duydukları anda grafikler oluşturabilir ve ihtiyaç duydukları verileri inceleyebilir. Herkes Analytics'i günlük olarak kullanmasa da, daha az kişi bana soru sormak için geliyor ve ekip daha hızlı hareket edebiliyor.

Bu büyüme nedeniyle, Veri Kültürü Ödülü kategorisinde Amplitude Pioneer Ödülleri finalisti oldum. Çalışmalarımızın hem içeride hem de dışarıda tanınması harika bir duygu.

Smartr'ı iyileştirme esnekliği

Herhangi bir analiz aracı, daha fazla veriye dayalı kararlar almanıza yardımcı olacak içgörüler sağlar, ancak Analytics'in esnekliği onu diğerlerinden ayırır. Veri analizini çok kolaylaştırır. İhtiyacımız olanı sıfırdan oluşturmak için zaman, çaba ve kaynak harcamak yerine, her şey kullanıma ve değiştirilmeye hazır.

Ekibim ürün teklifimizi iyileştirdi ve kullanıcı deneyimimizi iyileştirdi. Bir sonraki veya ilk kariyer hamlelerini yapmak için platformumuzu kullanan gelişen bir iş arayanlar topluluğu oluşturduk. Yeni etkinlikler oluşturabilir ve yerleşik gösterge tablolarını kullanarak bunları anında izleyip analiz edebiliriz. Verilere dayalı kararlar almaya ve sorgu yazmak ve analitik araçlarımızı yönetmek yerine performansı izlemeye odaklanmaya başladık. Kullanıcıların ihtiyaç duyduğu özellikleri görmek ve ana sayfadan sitemizdeki diğer sayfalara geçerken yollarını takip etmek kolaydır.

Yeni bir ürün oluştururken hızlı yanıt vermeli ve tüm etkinlik özelliği ayrıntılarının doğru olduğundan emin olmalısınız. Analitik ve Deney kombinasyonu, Smartr ekibinin kurumsal muadili kadar ölçüm yapan bir ürün oluşturmaya devam etmesini sağlar.