恢复对数据的信任并大幅加速产品增长

已发表: 2022-08-02

听到产品经理宣称“我不相信这些数据,所以我会按照我的想法去做”,这令人难以置信的沮丧。 但我们不能总是责怪他们的不信任。 组织数据装甲中的每一个小缺陷都会降低团队成为数据知情者的能力。 如果现有数据令人困惑或难以访问,人们就无法使用它来帮助产品发展。

在 Whisk,我们比任何人都清楚这一点。 恢复对数据的信任可能很困难,即使我们对仪器和实验有强烈的渴望,但并不总是有一种方法可以推进我们所学到的东西。 我们没有办法通过合法的数据和可操作的见解来支持我们的增长方法。

如果您现有的数据令人困惑或难以访问,人们就无法使用它来帮助产品发展。

然而,在过去的六个月中,Whisk 找到了一条通向更好数据管理的明确途径。 因此,我们能够修复过去,恢复对我们数据的信任,并发展我们的平台。

在 Whisk 引领产品增长

Whisk 是一款多合一的应用程序,用于分享食物内容并从中获利。 用户可以保存食谱、膳食计划并创建购物清单,以节省准备家常饭菜的时间。 三星于 2019 年收购了我们,我们在他们的物联网战略中发挥了重要作用。

我们正在为三星开发整个食品平台,构建所有 API,为公司主要部门的食品相关体验提供动力。 如今,从冰箱到联网烤箱灶和炉灶,数十款三星电器都采用了 Whisk 技术。

来到 Whisk 对我来说是一个难得的机会。 我最初开始研究 B2B2C 战略,但我们很快将更多关注点转移到了消费者体验上。 在过渡期间,我成为了产品负责人,负责以更加以产品为导向的视角来实现增长。 我想扩展我们现有的实验文化并增强我们基于数据的决策。

但首先,我需要控制我们的数据情况。

理解数据问题

数据是我们在 Whisk 工作的核心。 除了产品分析之外,我们还构建了这个令人难以置信的食品本体,它本身就是一个数据产品。 该团队拥有扎实的分析工具文化。 我们没有的是组织。

我没有技术背景,但是当我与数据科学家一起工作时,我开始了解两件事。 首先,绝大多数数据工作是确保数据是可观察的和精心设计的。 其次,数据必须高度可用且准确,以告知利益相关者。

当我们在 2021 年将重点转移到消费者体验上时,我启动了我们的第一个增长团队。 没过多久,我们的技术堆栈中的差距就对产品增长造成了不必要的障碍。

  • 我们有太多的仪器。 由于应用程序中数百个事件的检测方式不同,因此很难保持良好的数据质量并理解这一切。 我们的团队没有专注于关键事件。
  • 我们的实验有很大的差距。 将重点放在我们的主要 KPI 和指标上变得越来越难。 我们使用了多个具有不同功能的实验平台,默认将留存率作为主要指标。 对于我想要建立的高速增长文化来说,这并不理想。

我们当时并没有寻找新的平台。 我们已经是 Mixpanel 的客户,但该平台开始弃用他们的 A/B 测试功能,这将把我们带到与我想去的方向相反的方向。

这就是振幅出现在脑海中的时候。

Whisk 迁移到 Amplitude

我一直是 Amplitude 的产品宣传员 John Cutler 的粉丝。 John 提议为他网络中的任何人领导一个产品研讨会,我就过度使用仪器及其对 Whisk 数据文化的影响与他联系。 在研讨会期间,我们召集了来自 QA、工程和设计的团队成员来研究识别生命周期中关键事件的方法。 这是一次很棒的经历,最后,John 提到同时进行分析和实验是有价值的,而且 Amplitude 可以两者兼得。

我们计划将额外的实验性 SaaS 集成到 Mixpanel 上,但我对 Amplitude 了解得越多,它的一体化工具集就给我留下了深刻的印象。

对于实验,Amplitude 可防止 PM 过早查看结果并得出不确定的结果。 尽管它不是市场上最完善的实验平台,但我们喜欢 Amplitude 的愿景。 我们还看到了将我们所有的数据和实验工具放在一个高度可观察的系统中的好处。 我们可以追踪那些进行过长期实验的人。 我们可以很容易地管理实验独立性。 我们可以专注于准确的数据。 于是我们跳了起来。

改进产品创新

我们立即将 Amplitude 投入使用,处理我们的大部分实验。 我们一直在针对核心用户群中的各种获利机会进行 ROI 试点,包括一项 A/B 测试,旨在衡量在我们的主页上投放赞助广告的参与度影响。

通过在我们的主页上放置更多广告,我们预计滚动深度会减少(这与留存率相关)。 我们将当前的 Whisk 主页 Feed 与包含有针对性的广告展示位置的 Feed 进行了比较,发现了一个令人吃惊的结果:没有区别。

但这仅仅是开始。 我们现在一次运行多个测试,PM 正在更明智地思考如何有效地跟踪变化和衡量参与度。

Amplitude 帮助我们了解上下文中的事件,这导致内容创建和保留的增加。

Amplitude 帮助我们了解上下文中的事件,这导致内容创建和保留的增加。 例如,我们开发了一个名为“Made It”的功能,它会在用户准备好食谱后提示他们添加注释、标签和图片。 经过数十次迭代,结果乏善可陈,我们缩小幅度并检查不同用户操作的相关性。 很明显,一些用户想要更多的连接。 他们没有看到为了发帖而发帖的价值; 他们希望有人为他们发帖。

利用这种洞察力,我们帮助人们找到了重视并在应用内分享他们洞察力的其他人并与之建立联系。 我们希望以新的方式使用这些知识,目前正在评估基于用户内容驱动的参与度的“创作者基金”的货币化策略。 我们对内容如何推动参与度了解得越多,我们能提供的就越多。

我们还在 Amplitude 内回答了一系列战略和产品特定问题。 目前,我们正致力于揭示食谱的病毒拐点,跟踪社交奖励是否能有效推动习惯循环,并确定创造活跃用户的粉丝数量。 我们还可以更好地了解在某些日子里发生哪些互动事件以及发生的频率。 产品团队将这些见解分发给利益相关者和三星团队的其他成员。 我们的数据在美国和英国消费者烹饪行为的内部研究中被广泛引用,推动了产品创新和营销策略。

强大的功能帮助我们利用新市场

Whisk 的主要策略包括建立一个持续的参与引擎并获得对用户类型的更大可见性。 一个重要的优先事项是了解并利用尚未赢得的市场:垂直社交食品社区。

在使用 Amplitude 之前,我们对关键参与行动采取了一种万能的方法,并且保留的可能性很高。 今天,很容易对 Amplitude 中的不同部分进行聚类和相关分析,识别不同的角色并创建更多定制和定制的旅程。 只需单击一下即可完成所有操作。

尽管 Whisk 发展迅速,但它仍然保持着一种创业文化,因此组织上下的每个人都登录 Amplitude 来完成他们的工作。 这种数据民主化意味着更多的人能够收集洞察力,这些洞察力通常比 Mixpanel 以前的洞察力更具影响力。 Amplitude 在 Whisk 中的使用包括数据分析师、PM、营销和工程团队以及高管。 甚至合作伙伴团队也会不时参与进来。 振幅图表和仪表板对整个团队都是公开的,从而节省了大量时间。

我们经常使用 Compass,它显示了新用户事件与留存率的关系; 角色,根据用户事件行为的相似性将用户分组; 细分,显示用户在产品中所做的事情; 和漏斗分析,它可以深入了解用户如何成功地导航定义的事件路径。

对我们来说,另一个重要特征是迭代集成。 在采用 Amplitude 之前,我们曾考虑过使用迭代来提高跨平台的分析一致性。 对我们来说幸运的是,振幅是在我们评估的时候迭代获得的。 他们已经开始将迭代方式集成到他们的数据治理工具中,我们正在利用这些工具来构建围绕发布工具创建出色流程的团队。 使用 Amplitude,修复任何杂乱历史数据的转换更容易设置和管理。

我们已将所有事件文档迁移到 data.amplitude.com,并且正在慢慢处理数百个事件。 我们第一次更好地了解哪些地方存在不一致的仪器以及哪些地方缺少属性。 我们可以看到我们过去在哪里存在差距并即时纠正这些错误。 因此,即使是包含这些畸形事件的旧报告也可以提供有价值的见解。

所有这些新发现的用户见解对我们的团队来说都是令人兴奋的,因为它向我们展示了垂直社交食品社区比完全由算法驱动的社区更具吸引力。 我们可以看到用户实际烹饪,然后响应并从他们关注的人那里节省更多,这一事实表明我们的核心假设是有效的。

通往世界级基础设施的清晰道路

Amplitude 中的实验消除了衡量产品变化影响时的猜测,帮助我们恢复对数据的信任。 Amplitude 使我们能够建立我们已经有工作要做的以数据为基础的文化。

以数据为基础的文化可以带来快速、有效和可持续的产品增长。

随着我们向改进测试和跟踪迈进,Whisk 能够创建世界一流的数据和实验基础设施,并成为三星社区其他成员的典范。 我们的文化比以往任何时候都更加注重数据,这导致了 Whisk 的快速、有效和可持续的发展。

以产品为导向的增长图 CTA 广告