Creazione di dati self-service e cultura della sperimentazione per un migliore processo decisionale

Pubblicato: 2022-08-26

Quando si tratta di progettare un'app o un sito Web, la semplicità è la cosa migliore. Portare gli utenti dai punti A a B con il minor numero di passaggi e con l'interfaccia più pulita è il segno di un'esperienza eccezionale. Ma anche il percorso dell'utente più semplice genera una stringa di dati di eventi che devono essere ordinati e interpretati. Con gli strumenti giusti, questi dati grezzi diventano un tesoro di informazioni che possono portare la tua azienda a un livello superiore.

Sono il Senior Product Manager di SmartRecruiters, un fornitore di software che consente alle aziende di gestire il proprio programma di acquisizione di talenti come una potente macchina di marketing e vendita. La nostra suite per l'acquisizione di talenti B2B semplifica le assunzioni e aiuta le aziende a trovare e assumere le persone di cui hanno bisogno.

Con gli strumenti giusti, i dati grezzi diventano un tesoro di informazioni che possono portare la tua azienda a un livello superiore.

Un recente complemento al nostro prodotto B2B di punta è la nostra soluzione B2C, Smartr. Smartr è una piattaforma online di facile utilizzo che mette in contatto persone in cerca di lavoro con oltre 4.000 datori di lavoro. Abbiamo due milioni di utenti attivi che cercano lavoro online, generando centinaia di milioni di eventi.

Dare un senso ai percorsi degli utenti era impossibile

Quando sono entrato in azienda nel 2020, dare un senso ai viaggi dei nostri utenti era quasi impossibile. Stavamo accedendo direttamente al nostro database degli eventi e provavamo a visualizzare le cose utilizzando SQL e Tableau. Abbiamo scritto query per ogni evento analizzato e inserito i risultati in Tableau. Era dispendioso in termini di tempo e stavamo facendo i salti mortali per far funzionare i dati perché c'erano troppe parti mobili.

A quel tempo, Smartr era agli inizi e anche il nostro team era nuovo. Man mano che aggiungevamo più persone per lavorare su Smartr, cercavamo contemporaneamente nuovi strumenti che potessero aiutarci a migliorare. Volevamo analizzare e visualizzare più eventi e creare i nostri rapporti, ma i nostri strumenti di visualizzazione non erano adatti per l'analisi del monitoraggio degli eventi. Ho iniziato a cercare la soluzione perfetta per aiutarci a capire meglio il comportamento degli utenti.

Espansione sulla piattaforma giusta

Durante alcune ricerche di base sugli strumenti di analisi, ho scoperto che il lato aziendale di SmartRecruiters utilizzava la versione gratuita di Amplitude Analytics. Dato che lo avevamo già in casa, ho deciso di provarlo e mi sono iscritto ad alcuni workshop con gli account manager di Amplitude.

Anche con le funzionalità limitate del pacchetto Starter gratuito, è stato subito evidente che Analytics era lo strumento migliore sul mercato per il monitoraggio degli eventi. Si integra perfettamente con il nostro database e la sua interfaccia point-and-click, gli strumenti di visualizzazione integrati e i modelli di report ci consentono di tradurre i dati grezzi in informazioni di facile comprensione. In meno di un minuto possiamo porre e rispondere a domande che un tempo richiedevano mezza giornata per formulare, estrarre e interpretare utilizzando query SQL e Tableau.

Ho rapidamente concluso che non stavamo utilizzando Analytics al massimo delle sue capacità e ho sostenuto il nostro passaggio a uno dei livelli a pagamento della piattaforma in modo da poter sfruttare tutta la sua potenza.

Monitoraggio delle nuove funzionalità in tempo reale

Man mano che ne aumentavamo l'uso, Analytics ha introdotto il monitoraggio in tempo reale che ci consente di testare una nuova funzionalità nel momento in cui la aggiungiamo al nostro sito Web o app. Con un ID utente esistente, possiamo testare un progetto in tempo reale e vedere quali eventi vengono attivati ​​senza creare un ambiente di test o attendere l'accesso di utenti e clienti.

I dati in tempo reale rendono più felici i team e gli utenti perché ci sono meno ostacoli nei cicli di sviluppo e nel decifrare i percorsi dei clienti.

Entro pochi minuti dall'avvio di una nuova funzionalità, posso dire ai miei ingegneri se sta attivando gli eventi desiderati e possono risolvere e risolvere immediatamente il problema. È un modo più intelligente di lavorare (scusate il gioco di parole) e il mio team e i nostri utenti sono più felici perché ci sono meno ostacoli nei nostri cicli di sviluppo e nel decifrare i percorsi dei clienti.

Portare la sperimentazione a nuovi livelli

L'analisi è potente e, man mano che il team Smartr è cresciuto, abbiamo iniziato a cercare di fare di più con i dati degli eventi. La risposta logica era aumentare i nostri test A/B in modo da poter provare diverse versioni del nostro sito Web e dell'app.

Acquistare una piattaforma di sperimentazione separata o costruirne una nostra costerebbe facilmente centomila dollari all'anno, e quindi dovremmo trovare un modo per integrare la nuova piattaforma con i nostri dati ed eventi.

Invece di cercare una soluzione separata, ci siamo rivolti ad Amplitude Experiment, una solida soluzione di sperimentazione e gestione delle funzionalità che ci consente di provare le funzionalità e il miglioramento dell'interfaccia. Experiment si integra completamente con gli strumenti di Analytics offrendo al contempo un flusso di lavoro di sperimentazione completo.

Uno dei più grandi successi di Experiment è stato il lancio della funzione dei segnalibri di Smartr. Quando i candidati trovano un annuncio interessante, possono segnalarlo, continuare la ricerca di lavoro e tornare indietro e presentare domanda in un secondo momento. Abbiamo sperimentato due nuove versioni dell'icona del segnalibro, una stella e un cuore, oltre all'icona del segnalibro esistente come controllo. e ho visto che gli utenti preferivano un cuore.

Abbiamo eseguito il test assegnando 1/3 del nostro traffico a ciascuna delle varianti. Eravamo interessati a testare il tasso di bookmarking, che è il tasso di conversione degli utenti esposti alle diverse varianti e quanti di questi hanno aggiunto un lavoro ai segnalibri. Il tasso di bookmarking per il pulsante a forma di cuore è aumentato rispetto all'opzione di controllo del 46,6%, mentre il tasso di bookmarking per il pulsante a forma di stella solo dell'8,78%. Volevamo anche testare il tasso di candidatura, che è la percentuale di posti di lavoro aggiunti ai segnalibri per i quali i candidati hanno finito per candidarsi. Per il pulsante del cuore, tale frequenza è aumentata del 58% rispetto al controllo, mentre per il pulsante a stella il miglioramento è stato solo del 23,4%.

L'ampiezza ha confermato la significatività statistica di questi miglioramenti dopo sei giorni di esecuzione dell'esperimento, quindi la decisione di cambiare il vecchio pulsante dei segnalibri in un cuore è stata facile.

Naturalmente, abbiamo poi posto ulteriori domande. Come reagirebbero gli utenti se cambiassimo parte della nostra esperienza di onboarding o ne creassimo una completamente nuova? Interagirebbero di più con i contenuti? Candidarsi per più lavori? E in che modo questo avrebbe un impatto sui nostri KPI? Ci siamo trovati a porre e rispondere a più domande rilevanti per il nostro pubblico.

Una cultura dei dati in crescita

È emozionante vedere crescere la nostra cultura dei dati. Negli ultimi 12 mesi abbiamo assistito a un aumento del 950% delle adozioni. E invece di vedere un picco iniziale dopo l'assunzione e il ritiro, il coinvolgimento rimane alto. Viene introdotto un modello di dati self-service, in cui le persone si sentono più sicure dei dati che vedono e della loro capacità di prendere decisioni basate su di essi.

Uso Analytics quotidianamente per creare nuovi grafici e presentarli al team, dando l'esempio. Tutti, dai team di prodotto ai designer e agli ingegneri, possono creare grafici e scavare nei dati di cui hanno bisogno, ogni volta che ne hanno bisogno. Sebbene non tutti utilizzino Analytics quotidianamente, meno persone si rivolgono a me con domande o richieste di query e il team può muoversi più velocemente.

A causa di questa crescita, sono stato finalista degli Amplitude Pioneer Awards nella categoria Data Culture Award. È fantastico che il nostro lavoro sia riconosciuto sia esternamente che internamente.

La flessibilità di perfezionare Smartr

Qualsiasi strumento di analisi fornirà informazioni dettagliate per aiutare a prendere decisioni più informate sui dati, ma la flessibilità di Analytics lo distingue. Rende l'analisi dei dati così semplice. Invece di impiegare tempo, fatica e risorse per costruire ciò di cui abbiamo bisogno da zero, tutto è pronto per l'uso e la modifica.

Il mio team ha perfezionato la nostra offerta di prodotti e perfezionato la nostra esperienza utente. Abbiamo creato una fiorente comunità di persone in cerca di lavoro sfruttando la nostra piattaforma per fare la loro prossima o prima mossa di carriera. Possiamo creare nuovi eventi e tracciarli e analizzarli istantaneamente utilizzando le dashboard integrate. Abbiamo iniziato a prendere decisioni basate sui dati e a concentrarci sul monitoraggio delle prestazioni invece di scrivere query e gestire i nostri strumenti di analisi. È facile vedere di quali funzionalità hanno bisogno gli utenti e seguire i loro percorsi mentre navigano dalla home page alle altre pagine del nostro sito.

Quando si crea un nuovo prodotto, è necessario rispondere rapidamente e assicurarsi che tutti i dettagli delle proprietà dell'evento siano corretti. La combinazione di Analytics ed Experiment assicura che il team Smartr continui a creare un prodotto all'altezza della nostra controparte aziendale.

CTA sulle metriche del prodotto