通过分析优化您的产品,进行更安全的投注

已发表: 2022-08-30

作为产品经理 (PM),我们基本上将赌注押在我们产品的最佳前进道路上。 但仅仅把所有的钱都花在一件事情上是不够的。 项目经理首先需要了解如何做出最明智的投注,然后确定哪些有效,哪些无效以提高下一轮的赔率。

在 Jumbo Interactive,我们倾向于从进攻和防守的赌注来考虑产品策略。 Jumbo 开发解决方案以实现世界上最好的彩票体验,我已经在 J​​umbo 工作了一年多一点,担任增长领域的 PM。 在业务增长方面,我们几乎所有的赌注都将是令人反感的,因此我探索、添加或优化我们的增长循环,让它们运转得更好更快。

PM 需要了解如何进行明智的投注,然后确定哪些有效,哪些无效以提高下一轮的几率。

我们的产品之一是 Lotto Party,这是一种让朋友们将钱集中在一起以获得更大中奖机会的方式。 Lotto Party 会跟踪谁为特定抽奖贡献了什么。 这样,如果一方大获全胜,每个人都会收到通知并自动获得他们的份额。

Jumbo 的增长方法是追求 Lotto Party 等产品提供的病毒式增长循环。 不仅要以线性方式增长,而且要以指数方式增长,这一点很重要。 乐透派对提供复合增长:有人邀请他们的朋友参加,然后这些朋友中的一部分将创建自己的乐透派对并邀请更多朋友。

Jumbo 的增长引擎包括几个病毒式增长循环,然后由付费广告循环补充:付费广告产生潜在客户,从而产生资本,然后我们将其用于寻找更多潜在客户。 付费和病毒——两者协同工作。

为了自信地进行这些赌注、推动发现并衡量我们的成功,我们依靠 Amplitude。 在过去的一年中,我们看到 Lotto Party 的月活跃用户增加了 40%,这在很大程度上归功于我们从 Amplitude Analytics、Amplitude Experiment 和 Amplitude Audiences 中获得的洞察力。

分析确保每个人都在同一页面上

我们对 Analytics 所做的主要工作是衡量我们的领先指标和滞后指标。 因此,我们监控 Lotto Party 的一个关键指标是创建了多少组,因为新组表示循环的结束和新组的开始。 新组的发起人是不是最近的入党者? 这有助于我们理解同伴生长机制。

但不仅仅是我在 Analytics 中查看这些信息:它是整个公司的。 与我合作的每个工程团队都可以访问我的仪表板和图表,我鼓励他们经常查看它们。 我管理他们的团队空间,并为我们下的每个赌注创建一个笔记本。 我会将所有分析数据放入该笔记本中,以供工程团队审查。

我还为特定仪表板或 Analytics 中的图表制作了 Loom 短视频,以简洁地解释可能是复杂信息的内容。 我与所有人分享这些,包括工程师、数据分析师、其他 PM、我的老板和我老板的老板。 我可以与每个人分享一段四分钟的分析视频,而不是尝试安排八次不同的会议。 每个人都可以看到我在做什么,这项工作的结果,这有助于使我们的直觉假设更准确地了解用户实际使用产品的方式。

实验告诉我们哪些投资值得全力以赴

我们在 Analytics 中看到的内容自然会导致 Experiment 中的 A/B 测试。 这些测试使我们能够创建假设陈述,确定它们是真还是假,然后知道在哪里全力以赴(或在哪里撤回)。 实验增加了我们对特定赌注的信心,因为它为我们提供了清晰的风险收益分析。

我们首先创建一个实验设计文档,在该文档中我们解释问题并提供尽可能多的关于问题和可能机会的支持证据。 然后我们编写一个假设并调用主要指标,我们通常将其描述为权衡指标。 在大多数实验中,我们还列出了一些次要指标。 该信息将确定成功或失败的样子,以及我们需要用于统计显着性的样本量,然后确定实验持续时间。

实验设计文档为我们在实验中测试的内容提供了强有力的定义。 它还可以帮助我们确定实验的优先级。 为期三个月的实验相当缓慢。 如果我们知道一项实验会花费那么长时间,那么在开始更长的实验之前,最好先进行几个为期一周的实验。

实验设计很重要,因为我们想要快速、肮脏和廉价地构建所有东西。 我们希望尽快拿出一些东西,这样我们就可以收集更多数据,并且尽可能少地进行初始投资,这样我们就可以进行广泛的测试并进行智能构建。

尽可能少的初始投资可以让产品团队进行广泛的测试并巧妙地构建。

Lotto Party 的一个例子是产品周围缺乏可发现性。 平台上的大多数用户都处于我们所谓的“游戏”体验中,而 Lotto Party 则完全脱离了这种体验。 如果我们将 Lotto Party 更多地引入到游戏体验中,会产生什么影响? 这一举措将需要工程方面的重大提升,因此需要大量投资。

我们的实验思维让每个人——产品、工程、问答,以及参与过程的任何人——都考虑简化这个实验,以从最小的投资中获得最大的洞察力。 在实验中,我们看到将 Lotto Play 融入游戏体验几乎使 Lotto Party 的销售额翻了一番,创建的群组数量也增加了一倍以上。 在这方面进一步投资是不费吹灰之力的。

观众通过更个性化的购物车增加交易价值

我们使用 Audiences 来做出更智能的购物车推荐,我们将其包含在电子邮件外展和购买流程中。 无论是用户过去购买过的东西还是即将购买的东西,我们都会提供他们可能喜欢的其他产品,或者提供诸如“重播您以前玩过的这张票”之类的建议。 这是对那个经典问题的一个更聪明的转折,“你想要薯条吗?” 观众知道这个特定的顾客不想要薯条,但他们确实喜欢奶昔。 构建我们自己的算法框架来了解用户的需求是相当困难的,但 Amplitude 为我们提供了它。

推荐越个性化,用户选择它的可能性就越大。

由 Amazon Personalize 提供支持的 Audiences 中的推荐很容易为自己买单。 推荐越个性化,用户选择它的可能性就越大。 Jumbo 知道这一点,因为我们在开始使用 Audiences 之前就有了购物车展示位置,并且这些展示位置从那以后表现得更好。

大约八个月前,我对我们购物车中的产品有了一个想法。 以前,购物车展示位置专注于与慈善抽奖活动相关的部分产品,但我想将其扩展到我们所有的产品,并让受众决定什么是最适合每个客户的。 瞧,我们看到了点击次数和交易价值的提升。 使用 Audiences,您提供的选项越多,您要吸引的人就越多。

留住现有用户并做出明智的赌注以赢得新用户

这种个性化对于 Amplitude 与我们用于消息传递的 Braze 的集成也很重要。 如果您考虑一下我们的增长引擎,我们的所有这些获取循环都会产生客户,但另一方面——我们引擎的核心——是保留和参与,这就是 Braze 所在的位置。 更聪明地知道何时向用户发送消息会产生重大影响,了解正确的渠道同样重要。 如果该人经常使用特定应用程序,则向他们发送推送通知或应用程序内消息可能比电子邮件更有意义。

Braze 可以帮助我们继续习惯循环。 我们将习惯循环定义为客户在激活后的两个月内成为活跃玩家。 如果他们玩了两个月,他们就成了习惯性的球员。 我们使用 Braze 来触发这些习惯循环并保持它们旋转以提高我们的保留率。 但要做到这一点,我们需要让最好的数据流入 Braze。 分析通过创建更智能的群组和个性化内容来帮助我们做到这一点。 我们对这些内容、时间和交付越具体,这些活动的结果就越好。

在 Jumbo 工作,我学到了很多东西,我对增长有了全新的看法。 与 Amplitude 合作也是一个巨大的胜利。 如果没有 Amplitude,我们不会看到 Lotto Party 的月活跃用户增加。 该平台使我们能够进行最明智的投注。

数字优化指南