Przywracanie zaufania do danych i przyspieszanie wzrostu produktu dzięki amplitudzie

To niezwykle frustrujące, gdy menedżerowie produktu deklarują: „Nie ufam tym danym, więc po prostu pójdę z tym, co myślę”. Ale nie zawsze możemy ich winić za brak zaufania. Każde najmniejsze wgniecenie w pancerzu danych organizacji degraduje zdolność zespołu do uzyskiwania informacji o danych. A jeśli istniejące dane są mylące lub trudno dostępne, ludzie nie mogą ich użyć do rozwoju produktu.

W Whisk wiemy o tym lepiej niż ktokolwiek inny. Przywrócenie zaufania do danych może być trudne, a mimo że bardzo pragnęliśmy oprzyrządowania i eksperymentowania, nie zawsze było sposób, aby kontynuować to, czego się nauczyliśmy. Nie mieliśmy sposobu, aby wesprzeć nasze podejście do rozwoju za pomocą uzasadnionych danych i praktycznych spostrzeżeń.

Jeśli Twoje istniejące dane są mylące lub trudno dostępne, ludzie nie mogą ich użyć do rozwoju produktu.

Jednak w ciągu ostatnich sześciu miesięcy Whisk znalazł wyraźną drogę do lepszego zarządzania danymi. W rezultacie byliśmy w stanie naprawić przeszłość, przywrócić zaufanie do naszych danych i rozwinąć naszą platformę.

Wiodący rozwój produktów w Whisk

Whisk to wszechstronna aplikacja do udostępniania i zarabiania na treściach spożywczych. Użytkownicy mogą zapisywać przepisy, plan posiłków i tworzyć listy zakupów, aby zaoszczędzić czas na przygotowywaniu domowych posiłków. Samsung przejął nas w 2019 roku i odgrywamy ważną rolę w ich strategii IoT.

Pracujemy nad rozwojem całej platformy spożywczej dla Samsunga, budując wszystkie interfejsy API, które wspierają doświadczenia związane z żywnością w głównych oddziałach firmy. Obecnie dziesiątki urządzeń Samsung są wyposażone w technologię Whisk, od lodówek po połączone kuchenki i płyty kuchenne.

Przyjazd do Whisk był dla mnie niesamowitą okazją. Początkowo zacząłem pracować nad strategią B2B2C, ale wkrótce przenieśliśmy więcej uwagi na doświadczenia konsumenckie. W okresie przejściowym zostałem szefem produktu, którego zadaniem było wprowadzenie do rozwoju obiektywu bardziej zorientowanego na produkt. Chciałem rozszerzyć naszą istniejącą kulturę eksperymentowania i usprawnić podejmowanie decyzji w oparciu o dane.

Ale najpierw musiałem opanować naszą sytuację dotyczącą danych.

Zrozumienie problemu z danymi

Dane są podstawą tego, co robimy w Whisk. Poza analizą produktów zbudowaliśmy również tę niesamowitą ontologię żywności, która sama w sobie jest produktem danych. Zespół posiada solidną kulturę oprzyrządowania analitycznego. To, czego nie mieliśmy, to organizacja.

Nie mam zaplecza technicznego, ale zdałem sobie sprawę z dwóch rzeczy, pracując z naukowcami danych. Po pierwsze, ogromna większość pracy z danymi polega na upewnieniu się, że dane są obserwowalne i dobrze zaprojektowane. Po drugie, dane muszą być wysoce dostępne i dokładne, aby informować zainteresowane strony.

Kiedy w 2021 roku skupiliśmy się na doświadczeniach konsumenckich, uruchomiłem nasz pierwszy zespół ds. wzrostu. Nie trzeba było długo czekać, aby zobaczyć, że luki w naszym stosie technologicznym stwarzają niepotrzebne przeszkody dla rozwoju produktów.

• Mieliśmy za dużo oprzyrządowania. Przy setkach zdarzeń oprzyrządowanych w różny sposób w różnych aplikacjach trudno było utrzymać dobrą jakość danych i zrozumieć to wszystko. Nasze zespoły nie skupiały się na kluczowych wydarzeniach.
• W naszych eksperymentach mieliśmy dużą lukę. Coraz trudniej było skupić się na naszych głównych wskaźnikach KPI i wskaźnikach. Wykorzystaliśmy wiele platform do eksperymentów o różnych możliwościach, domyślnie stosując retencję jako podstawową metrykę. Nie było to idealne rozwiązanie dla kultury szybkiego wzrostu, którą chciałem zbudować.

Nie szukaliśmy wtedy nowej platformy. Byliśmy już klientami Mixpanel, ale platforma zaczęła wycofywać swoją funkcjonalność testów A/B, co zaprowadziłoby nas w przeciwnym kierunku niż chciałem iść.

Wtedy przyszedł mi do głowy Amplituda.

Migracja Whiska do Amplitudy

Od dawna byłem fanem Johna Cutlera, propagatora produktów w firmie Amplitude. John zaproponował, że poprowadzi warsztaty produktowe dla każdego w swojej sieci, a ja skontaktowałem się z nim w sprawie nadmiernego oprzyrządowania i jego wpływu na kulturę danych Whisk. Podczas warsztatów zebraliśmy członków zespołu z działów kontroli jakości, inżynierii i projektowania, aby zbadać sposoby identyfikacji kluczowych wydarzeń w naszym cyklu życia. To było wspaniałe doświadczenie, a na koniec John wspomniał, że warto mieć obok siebie swoje analizy i eksperymenty, a Amplituda może zrobić jedno i drugie.

Planowaliśmy zintegrować dodatkowe eksperymentalne SaaS z Mixpanelem, ale im więcej dowiadywałem się o Amplitude, tym większe wrażenie robił na mnie jego uniwersalny zestaw narzędzi.

W przypadku eksperymentów, Amplitude chroni przed PM zbyt wcześnie zaglądanie do wyników i wyciąganie niejednoznacznych wyników. Mimo że nie była to najbardziej rozbudowana platforma do eksperymentów na rynku, podobała nam się wizja Amplitude. Dostrzegliśmy również korzyści z posiadania wszystkich naszych danych i narzędzi do eksperymentów w jednym, wysoce obserwowalnym systemie. Mogliśmy śledzić ludzi, którzy brali udział w długotrwałych eksperymentach. Mogliśmy dość łatwo zarządzać niezależnością eksperymentu. Możemy skupić się na dokładnych danych. Więc skoczyliśmy.

Ulepszona innowacyjność produktów

Natychmiast uruchomiliśmy Amplitudę, zajmując się większością naszych eksperymentów. Przeprowadziliśmy programy pilotażowe ROI dotyczące różnych możliwości zarabiania w ramach podstawowej bazy użytkowników, w tym test A/B mający na celu zmierzenie wpływu wyświetlania sponsorowanych reklam w naszym głównym kanale informacyjnym na zaangażowanie.

Umieszczając więcej reklam w naszym głównym kanale, spodziewaliśmy się zmniejszenia głębokości przewijania (co koreluje z retencją). Porównaliśmy aktualny kanał główny Whisk z kanałem zawierającym ukierunkowane miejsce docelowe reklamy i odkryliśmy zaskakujący wynik: brak różnicy.

Ale to dopiero początek. Obecnie przeprowadzamy wiele testów naraz, a menedżerowie projektu myślą bardziej inteligentnie o tym, jak skutecznie śledzić zmiany i mierzyć zaangażowanie.

Amplituda pomaga nam zrozumieć wydarzenia w kontekście, co doprowadziło do wzrostu tworzenia i przechowywania treści.

Amplituda pomaga nam zrozumieć wydarzenia w kontekście, co doprowadziło do wzrostu tworzenia i przechowywania treści. Na przykład opracowaliśmy funkcję o nazwie „Made It”, która zachęca użytkowników do dodawania notatek, tagów i zdjęć po przygotowaniu przepisu. Po dziesiątkach iteracji, które przyniosły słabe wyniki, pomniejszyliśmy Amplitudę i zbadaliśmy, gdzie są skorelowane różne działania użytkowników. Natychmiast stało się jasne, że niektórzy użytkownicy chcą więcej połączeń. Nie widzieli wartości publikowania ze względu na to; chcieli, żeby ktoś napisał post.

Korzystając z tych informacji, pomogliśmy ludziom znaleźć i połączyć się z innymi osobami, które cenią i udostępniają swoje spostrzeżenia w aplikacji. Zamierzamy wykorzystać tę wiedzę w nowy sposób i obecnie oceniamy strategie zarabiania dla „funduszu dla twórców” w oparciu o zaangażowanie oparte na treściach użytkowników. Im więcej dowiadujemy się o tym, jak treści napędzają zaangażowanie, tym więcej możemy zaoferować.

W ramach Amplitude odpowiadamy również na szereg pytań strategicznych i dotyczących konkretnych produktów. Obecnie pracujemy nad odkryciem wirusowego punktu przegięcia przepisów, śledzeniem, czy nagrody społecznościowe są skuteczne w napędzaniu pętli nawyków i określaniem magicznej liczby obserwujących, które tworzą aktywnego użytkownika. Lepiej też rozumiemy, które i jak często wydarzenia związane z zaangażowaniem mają miejsce w określone dni. Zespół ds. produktu rozpowszechnia te spostrzeżenia wśród interesariuszy i innych członków zespołu Samsung. Nasze dane są szeroko cytowane w wewnętrznych badaniach zachowań konsumentów w Stanach Zjednoczonych i Wielkiej Brytanii, napędzających innowacje produktowe i strategie marketingowe.

Solidne funkcje pomagają nam czerpać korzyści z nowego rynku

Podstawowa strategia Whisk obejmuje budowanie ciągłego silnika angażującego i uzyskanie większej widoczności typów użytkowników. Dużym priorytetem jest zrozumienie i wykorzystanie rynku, który nie został jeszcze zdobyty: pionowej społeczności społecznej żywności.

Przed użyciem Amplitude stosowaliśmy uniwersalne podejście do kluczowych działań angażujących z wysokim prawdopodobieństwem utrzymania. Obecnie łatwo jest przeprowadzić analizę grupowania i korelacji różnych segmentów w ramach Amplitude, identyfikując różne osoby i tworząc bardziej spersonalizowane i dostosowane do potrzeb podróże. A wszystko to za jednym kliknięciem.

Whisk wciąż utrzymuje kulturę startupową pomimo szybkiego wzrostu, więc wszyscy w organizacji logują się do Amplitude, aby wykonać swoją pracę. Ta demokratyzacja danych oznacza, że ​​więcej osób jest w stanie zebrać spostrzeżenia, a spostrzeżenia te mają zazwyczaj większy wpływ niż poprzednie spostrzeżenia z Mixpanel. Wykorzystanie Amplitude w Whisk obejmuje analityków danych, PMów, zespoły marketingowe i inżynierskie oraz kadrę kierowniczą. Nawet zespół ds. partnerstwa od czasu do czasu angażuje się. Wykresy amplitudy i dashboardy są publicznie dostępne dla całego zespołu, co pozwala zaoszczędzić sporo czasu.

Regularnie używamy Compass, który pokazuje, jak nowe zdarzenia użytkowników korelują z retencją; Persony, które grupują użytkowników w klastry na podstawie podobieństwa ich zachowań na zdarzeniach; Segmentacja, która pokazuje, co użytkownicy robią w produkcie; oraz Analiza ścieżki, która zapewnia wgląd w to, jak skutecznie użytkownicy poruszają się po zdefiniowanej ścieżce zdarzeń.

Kolejną istotną dla nas funkcją jest integracja iteracyjna. Przed przyjęciem Amplitudy myśleliśmy o użyciu iteracji w celu poprawy spójności analiz na różnych platformach. Na szczęście dla nas Amplituda została nabyta iteracyjnie w czasie naszej oceny. Rozpoczęli iteracyjną integrację ze swoimi narzędziami do zarządzania danymi, które wykorzystujemy, gdy budujemy zespół tworzący gwiezdne procesy wokół oprzyrządowania do wydania. Dzięki Amplitude przekształcenia mające na celu naprawienie niechlujnych danych historycznych są znacznie łatwiejsze do skonfigurowania i zarządzania.

Przenieśliśmy całą naszą dokumentację wydarzeń do data.amplitude.com i powoli przechodzimy przez setki wydarzeń. Po raz pierwszy znacznie lepiej rozumiemy, gdzie występuje niespójne oprzyrządowanie, a gdzie brakuje właściwości. Możemy zobaczyć, gdzie mieliśmy luki w przeszłości i na bieżąco korygować te błędy. Dlatego nawet stare raporty zawierające te zniekształcone zdarzenia mogą dostarczyć cennych informacji.

Wszystkie te nowo odkryte spostrzeżenia użytkowników są ekscytujące dla naszego zespołu, ponieważ pokazują nam, że pionowa społeczność społecznościowa może być bardziej angażująca niż ta całkowicie oparta na algorytmach. Fakt, że widzimy, jak użytkownicy faktycznie gotują, a następnie reagują i oszczędzają więcej od obserwowanych przez nich osób, pokazuje, że nasza podstawowa hipoteza działa.

Wyraźna droga do światowej klasy infrastruktury

Eksperymenty w ramach Amplitude usuwają zgadywanie z pomiaru wpływu zmian w produktach, pomagając nam przywrócić zaufanie do danych. Amplituda pozwoliła nam zbudować kulturę opartą na danych, którą mieliśmy już do zrobienia.

Kultura oparta na danych może prowadzić do szybkiego, efektywnego i zrównoważonego rozwoju produktu.

W miarę zbliżania się do ulepszonego testowania i śledzenia, Whisk jest w stanie stworzyć światowej klasy infrastrukturę danych i eksperymentów — i stać się wzorem dla reszty społeczności Samsunga. Nasza kultura jest bardziej niż kiedykolwiek oparta na danych, co doprowadziło do szybkiego, efektywnego i zrównoważonego rozwoju Whisk.