Восстановление доверия к данным и ускорение роста продукта с помощью Amplitude

Невероятно неприятно слышать, как продакт-менеджеры заявляют: «Я не доверяю этим данным, поэтому я просто буду исходить из того, что думаю». Но мы не всегда можем обвинять их в недоверии. Каждая маленькая вмятина в информационном панцире организации снижает способность команды получать информацию о данных. И если существующие данные запутаны или труднодоступны, люди не могут использовать их для развития продукта.

В Whisk мы знаем это лучше, чем кто-либо другой. Может быть трудно восстановить доверие к данным, и хотя у нас было сильное желание использовать инструменты и экспериментировать, не всегда был способ продвигать вперед то, что мы узнали. У нас не было способа поддержать наши подходы к росту с помощью узаконенных данных и практических идей.

Если ваши существующие данные запутаны или труднодоступны, люди не смогут использовать их для развития продукта.

Однако за последние шесть месяцев Whisk нашел четкий путь к лучшему управлению данными. В результате мы смогли исправить прошлое, восстановить доверие к нашим данным и расширить нашу платформу.

Возглавляя рост продукта в Whisk

Whisk — это универсальное приложение для обмена и монетизации контента о еде. Пользователи могут сохранять рецепты, план питания и создавать списки покупок, чтобы сэкономить время на приготовлении домашних блюд. Samsung приобрела нас в 2019 году, и мы играем важную роль в их стратегии IoT.

Мы работаем над разработкой всей продуктовой платформы для Samsung, создавая все API-интерфейсы, которые обеспечивают взаимодействие с продуктами питания в основных подразделениях компании. Сегодня десятки устройств Samsung оснащены технологией Whisk, от холодильников до подключаемых духовых шкафов и плит.

Приход в Whisk был для меня невероятной возможностью. Сначала я начал работать над стратегией B2B2C, но вскоре мы сосредоточились на потребительском опыте. В переходный период я ​​стал руководителем отдела продуктов, которому было поручено сделать рост более ориентированным на продукт. Я хотел расширить нашу существующую культуру экспериментов и улучшить процесс принятия решений на основе данных.

Но сначала мне нужно было взять под контроль нашу ситуацию с данными.

Понимание проблемы данных

Данные лежат в основе того, что мы делаем в Whisk. Помимо продуктовой аналитики, мы также создали эту невероятную онтологию продуктов питания, которая сама по себе является информационным продуктом. Команда имеет твердую культуру инструментов аналитики. Чего у нас не было, так это организации.

У меня нет технического образования, но я понял две вещи, работая вместе с учеными по данным. Во-первых, подавляющее большинство работы с данными заключается в том, чтобы убедиться, что данные доступны для наблюдения и хорошо спроектированы. Во-вторых, данные должны быть высокодоступными и точными для информирования заинтересованных сторон.

Когда в 2021 году мы переключили наше внимание на потребительский опыт, я запустил нашу первую команду роста. Вскоре мы увидели, что пробелы в нашем стеке технологий создают ненужные препятствия для роста продукта.

• У нас было слишком много инструментов. С сотнями событий, по-разному инструментированных в разных приложениях, было трудно поддерживать хорошее качество данных и понимать их все. Наши команды не были сосредоточены на ключевых событиях.
• У нас был большой пробел в наших экспериментах. Становилось все труднее удерживать фокус на наших основных KPI и показателях. Мы использовали несколько экспериментальных платформ с разными возможностями, по умолчанию удержание в качестве основного показателя. Это не было идеальным для культуры быстрого роста, которую я хотел построить.

В то время мы не искали новую платформу. Мы уже были клиентами Mixpanel, но платформа начала отказываться от их функциональности A/B-тестирования, что привело бы нас в направлении, противоположном тому, в котором я хотел двигаться.

Тогда на ум пришла Амплитуда.

Миграция Whisk на Amplitude

Я долгое время был поклонником Джона Катлера, проповедника продукции Amplitude. Джон предложил провести семинар по продукту для всех в его сети, и я связался с ним по поводу чрезмерного использования инструментов и его влияния на культуру данных Whisk. Во время семинара мы собрали коллег из отдела контроля качества, проектирования и дизайна, чтобы изучить способы определения ключевых событий в нашем жизненном цикле. Это был отличный опыт, и в конце Джон упомянул, что полезно иметь рядом аналитику и эксперименты, и что Amplitude может делать и то, и другое.

Мы планировали интегрировать дополнительные экспериментальные SaaS в Mixpanel, но чем больше я узнавал об Amplitude, тем больше меня впечатлял его универсальный набор инструментов.

Для экспериментов Amplitude защищает от продакт-менеджеров, которые слишком рано заглядывают в результаты и получают неубедительные результаты. Несмотря на то, что это была не самая совершенная экспериментальная платформа на рынке, нам понравилось видение Amplitude. Мы также увидели преимущество наличия всех наших данных и инструментов для экспериментов в единой, хорошо наблюдаемой системе. Мы могли отслеживать людей, которые участвовали в длительных экспериментах. Мы могли бы довольно легко управлять независимостью эксперимента. Мы могли бы сосредоточиться на точных данных. Итак, мы прыгнули.

Улучшенные инновации продукта

Мы сразу же запускаем Amplitude, проводя большую часть наших экспериментов. Мы запустили пилотные тесты ROI для различных возможностей монетизации в рамках основной пользовательской базы, включая A/B-тест, предназначенный для измерения влияния показа спонсируемых объявлений на нашей домашней ленте.

Размещая больше рекламы в нашей домашней ленте, мы ожидали уменьшения глубины прокрутки (что коррелирует с удержанием). Мы сравнили текущую домашнюю ленту Whisk с той, которая включала целевое размещение рекламы, и обнаружили поразительный результат: никакой разницы.

Но это только начало. Теперь мы проводим несколько тестов одновременно, и менеджеры по проектам более разумно думают о том, как отслеживать изменения и эффективно измерять вовлеченность.

Amplitude помогает нам понимать события в контексте, что привело к увеличению количества создаваемого и сохраняемого контента.

Amplitude помогает нам понимать события в контексте, что привело к увеличению количества создаваемого и сохраняемого контента. Например, мы разработали функцию под названием «Сделано», которая предлагает пользователям добавлять заметки, теги и изображения после того, как они приготовили рецепт. После десятков итераций, которые дали тусклые результаты, мы уменьшили масштаб Amplitude и проверили, где коррелируют различные действия пользователя. Сразу стало ясно, что некоторые пользователи хотят больше подключений. Они не видели ценности публикации ради нее; они хотели, чтобы кто-то пост для.

Используя это понимание, мы помогли людям найти и связаться с другими людьми, которые ценят свои идеи и делятся ими в приложении. Мы стремимся использовать эти знания по-новому и в настоящее время оцениваем стратегии монетизации для «фонда для авторов», основанные на вовлеченности, обусловленной пользовательским контентом. Чем больше мы узнаем о том, как контент стимулирует взаимодействие, тем больше мы можем предложить.

Мы также отвечаем на множество стратегических вопросов и вопросов, касающихся конкретных продуктов, в рамках Amplitude. В настоящее время мы работаем над выявлением критической точки вирусных рецептов, отслеживаем, эффективны ли социальные вознаграждения для управления циклом привычки, и определяем магическое количество подписчиков, которые создают активного пользователя. Мы также лучше понимаем, какие мероприятия по помолвке и как часто происходят в определенные дни. Команда продукта распространяет эти идеи среди заинтересованных сторон и других членов команды Samsung. Наши данные широко цитируются во внутренних исследованиях о кулинарном поведении потребителей в США и Великобритании, стимулируя инновации продуктов и маркетинговые стратегии.

Надежные функции помогают нам извлечь выгоду из нового рынка

Основная стратегия Whisk включает в себя создание механизма постоянного взаимодействия и получение большей информации о типах пользователей. Большим приоритетом является понимание и получение прибыли на рынке, который еще не завоеван: вертикальном социальном продовольственном сообществе.

До использования Amplitude у нас был универсальный подход к ключевым действиям по взаимодействию с высокой вероятностью удержания. Сегодня в Amplitude легко проводить кластерный и корреляционный анализ различных сегментов, выявляя разных персонажей и создавая более индивидуальные и адаптированные маршруты. И все это делается в один клик.

Whisk по-прежнему поддерживает культуру стартапов, несмотря на быстрый рост, поэтому все сотрудники организации заходят в Amplitude, чтобы выполнять свою работу. Эта демократизация данных означает, что больше людей могут собирать информацию, и эта информация, как правило, более эффективна, чем предыдущие идеи от Mixpanel. Amplitude используют в Whisk аналитики данных, продакт-менеджеры, маркетинговые и инженерные группы, а также руководители. Даже команда по партнерству время от времени принимает участие. Диаграммы амплитуд и информационные панели общедоступны для всей команды, что экономит много времени.

Мы регулярно используем Compass, который показывает, как новые пользовательские события коррелируют с удержанием; Персонажи, которые группируют пользователей в кластеры на основе сходства их поведения при событиях; Сегментация, показывающая, что пользователи делают в продукте; и анализ воронки, который дает представление о том, насколько успешно пользователи перемещаются по определенному пути событий.

Еще одна важная функция для нас — это итеративная интеграция. Перед внедрением Amplitude мы думали об использовании Iteratively для повышения согласованности аналитики на разных платформах. К счастью для нас, Amplitude был приобретен итеративно примерно во время нашей оценки. Они начали интегрировать Iteratively в свои инструменты управления данными, которые мы используем, когда создаем команду, которая создает звездные процессы вокруг инструментария выпуска. С Amplitude преобразования для исправления любых запутанных исторических данных намного проще в настройке и управлении.

Мы перенесли всю нашу документацию по событиям на data.amplitude.com и постепенно изучаем сотни событий. Впервые мы получаем гораздо лучшее представление о том, где есть несовместимые инструменты и где отсутствуют свойства. Мы можем увидеть, где у нас были пробелы в прошлом, и исправить эти ошибки на лету. Таким образом, даже старые отчеты с такими искаженными событиями могут дать ценную информацию.

Все эти новоприобретенные идеи пользователей интересны для нашей команды, потому что они показывают нам, что вертикальное социальное кулинарное сообщество может быть более привлекательным, чем сообщество, полностью управляемое алгоритмами. Тот факт, что мы можем видеть, как пользователи действительно готовят, а затем отвечают и сохраняют больше от людей, на которых они подписаны, показывает, что наша основная гипотеза работает.

Прямой путь к инфраструктуре мирового уровня

Эксперименты в Amplitude избавляют от догадок при измерении влияния изменений продукта, помогая нам восстановить доверие к данным. Amplitude позволила нам создать культуру, основанную на данных, для которой у нас уже были нужные элементы.

Культура, основанная на данных, может привести к быстрому, эффективному и устойчивому росту продукта.

По мере того, как мы продвигаемся к улучшению тестирования и отслеживания, Whisk может создать инфраструктуру данных и экспериментов мирового уровня и стать образцом для остального сообщества Samsung. Наша культура больше, чем когда-либо, зависит от данных, что привело к быстрому, эффективному и устойчивому росту Whisk.