Amplitude によるデータへの信頼の回復と製品の成長の加速

公開: 2022-08-02

プロダクトマネージャーが「私はこのデータを信頼していないので、私は自分の考えに従うだけです」と宣言するのを聞くのは非常にイライラします。しかし、彼らの不信感を常に責めることはできません。組織のデータアーマーが少しでもへこむと、チームがデータインフォームドになる能力が低下します。また、既存のデータがわかりにくく、アクセスが難しい場合、人々はそれを製品の成長に役立てることができません。

ウィスクでは、このことを誰よりもよく知っています。データの信頼を回復することは困難な場合があり、計測と実験を強く望んでいましたが、学んだことを前進させる方法が常にあるとは限りませんでした。正当化されたデータと実用的な洞察で成長アプローチをサポートする方法がありませんでした。

既存のデータがわかりにくく、アクセスしにくい場合、人々はそれを使用して製品を成長させることができません。

しかし、過去 6 か月間で、Wishk はより優れたデータ管理への明確な道筋を見つけました。その結果、過去を修正し、データの信頼を回復し、プラットフォームを成長させることができました。

ウィスクの製品成長の先頭に立つ

Whisk は、食品コンテンツを共有して収益化するためのオールインワンアプリです。ユーザーは、レシピや食事プランを保存し、買い物リストを作成して、家庭料理の準備にかかる時間を節約できます。 2019 年に Samsung に買収され、Samsung の IoT 戦略において重要な役割を果たしています。

私たちは、Samsung の食品プラットフォーム全体の開発に取り組んでおり、同社の主要な部門全体で食品関連のエクスペリエンスを強化するすべての API を構築しています。今日、冷蔵庫から接続されたオーブンレンジやコンロまで、数十の Samsung アプライアンスが Whisk テクノロジーを備えています。

ウィスクに来ることは、私にとって素晴らしい機会でした。私は当初、B2B2C 戦略に取り組み始めましたが、すぐに消費者体験に重点を移しました。移行中、私は製品責任者になり、より製品志向のレンズを成長に向けることを任されました。既存の実験文化を拡大し、データに基づいた意思決定を強化したいと考えていました。

しかし、まず、データの状況を制御する必要がありました。

データの問題を理解する

データは、Wishk の業務の中心です。製品分析以外にも、それ自体がデータ製品であるこの素晴らしい食品オントロジーも構築しました。チームには、分析ツールの確固たる文化があります。私たちが持っていなかったのは組織でした。

私は技術的なバックグラウンドを持っていませんが、データサイエンティストと一緒に仕事をする中で 2 つのことを理解するようになりました。まず、データ作業の大部分は、データが観察可能で、適切に設計されていることを確認することです。次に、利害関係者に情報を提供するために、データは可用性が高く正確でなければなりません。

2021 年に消費者体験に焦点を移したとき、私は最初の成長チームを立ち上げました。技術スタックのギャップが製品の成長に不必要な障害を生み出していることに気付くのに、それほど時間はかかりませんでした。

計装が多すぎました。 何百ものイベントがアプリごとに異なる方法で計測されているため、良好なデータ品質を維持し、すべてを理解することは困難でした。私たちのチームは重要なイベントに集中していませんでした。
私たちの実験には大きなギャップがありました。 主要な KPI と指標に焦点を合わせ続けることが難しくなりつつありました。さまざまな機能を備えた複数の実験プラットフォームを使用し、主要な指標として保持をデフォルトに設定しました。私が構築したいと考えていた高速成長文化には理想的ではありませんでした。

当時、私たちは新しいプラットフォームを探していませんでした。私たちはすでに Mixpanel の顧客でしたが、プラットフォームは A/B テスト機能を廃止し始めました。

そこで思いついたのが振幅です。

Whisk の Amplitude への移行

私は長い間、Amplitude の製品エバンジェリストである John Cutler のファンでした。 John は、彼のネットワーク内の誰にでも製品ワークショップを開催することを申し出ました。ワークショップでは、QA、エンジニアリング、設計のチームメイトを集めて、ライフサイクルの重要なイベントを特定する方法を検討しました。素晴らしい経験でした。最後に、John は、分析と実験を並べて行うことには価値があり、Amplitude は両方を行うことができると述べました。

追加の実験用 SaaS を Mixpanel に統合する予定でしたが、Amplitude について学べば学ぶほど、そのオールインワンツールセットに感銘を受けました。

実験のために、Amplitude は、PM が結果をあまりにも早く覗いて決定的でない結果を引き出すことを防ぎます。市場で最も構築された実験プラットフォームではありませんでしたが、Amplitude のビジョンは気に入りました。また、すべてのデータと実験ツールを 1 つの非常に監視可能なシステムにまとめることの利点もわかりました。長期にわたる実験に参加していた人々を追跡することができました。実験の独立性を非常に簡単に管理できました。正確なデータに集中することができました。それで私たちは跳びました。

製品イノベーションの向上

Amplitude をすぐに使用して、実験の多くを処理しました。私たちは、ホームフィードでスポンサー広告を実行することによるエンゲージメントの影響を測定するために設計された A/B テストを含む、コアユーザーベース内のさまざまな収益化の機会について ROI パイロットを実行してきました。

ホームフィードにより多くの広告を配置することで、スクロールの深さが減少することが予想されました (これはリテンションと相関します)。現在の Whisk ホームフィードと、ターゲットを絞った広告配置を含むフィードを比較したところ、驚くべき結果が得られました。違いはありません。

しかし、これはほんの始まりにすぎません。現在、複数のテストを一度に実行しており、PM は変更を追跡してエンゲージメントを効果的に測定する方法についてよりインテリジェントに考えています。

振幅は、コンテキスト内でイベントを理解するのに役立ち、コンテンツの作成と保持の増加につながりました。

振幅は、コンテキスト内でイベントを理解するのに役立ち、コンテンツの作成と保持の増加につながりました。たとえば、ユーザーがレシピを準備したら、メモ、タグ、および写真を追加するように求める「Made It」という機能を開発しました。精彩を欠いた結果をもたらした数十回の反復の後、Amplitude をズームアウトし、さまざまなユーザーアクションがどこで相関しているかを調べました。一部のユーザーがより多くの接続を望んでいることがすぐに明らかになりました。彼らは投稿することの価値を理解していませんでした。彼らは誰かに投稿してほしかった。

このインサイトを使用して、アプリ内でインサイトを評価し共有している他のユーザーを見つけてつながることができるようにしました。この知識を新しい方法で使用することを検討しており、現在、ユーザーコンテンツによって引き起こされるエンゲージメントに基づく「クリエイターファンド」の収益化戦略を評価しています。コンテンツがどのようにエンゲージメントを促進するかについて学べば学ぶほど、より多くのことを提供できます。

また、Amplitude 内の多数の戦略的および製品固有の質問にも回答しています。現在、レシピのバイラル変曲点を明らかにし、社会的報酬が習慣ループを促進するのに効果的かどうかを追跡し、アクティブユーザーを作成するフォロワーの魔法の数を決定することに取り組んでいます. また、特定の日にどのエンゲージメントイベントがどのくらいの頻度で発生するかについても理解を深めることができます。製品チームは、これらの洞察を関係者や Samsung チームの他のメンバーに配布します。当社のデータは、米国と英国の消費者の調理行動に関する社内調査で広く引用されており、製品の革新とマーケティング戦略を推進しています。

堅牢な機能により、新しい市場で利益を得ることができます

Whisk の主な戦略には、継続的なエンゲージメントエンジンの構築と、ユーザーの種類に対する可視性の向上が含まれます。最大の優先事項は、まだ勝っていない市場を理解し、それを活用することです。それは、バーティカルソーシャルフードコミュニティです。

Amplitude を使用する前は、保持の可能性が高い主要なエンゲージメントアクションに対して万能のアプローチをとっていました。現在、Amplitude 内のさまざまなセグメントのクラスタリングと相関分析を簡単に実行して、さまざまなペルソナを識別し、よりカスタマイズされたジャーニーを作成できます。そして、それはすべてワンクリックで行われます。

急速な成長にもかかわらず、Whisk は依然としてスタートアップ企業の文化を維持しているため、組織内の誰もが Amplitude にログインして仕事をこなしています。このデータの民主化は、より多くの人々が洞察を収集できることを意味し、これらの洞察は通常、Mixpanel からの以前の洞察よりも影響力があります。 Whisk 全体での Amplitude の使用には、データアナリスト、PM、マーケティングおよびエンジニアリングチーム、およびエグゼクティブが含まれます。パートナーシップチームも時々参加します。振幅チャートとダッシュボードはチーム全体で公開されているため、時間を大幅に節約できます。

私たちは定期的に Compass を使用しています。これは、新しいユーザーイベントが維持率とどのように相関しているかを示します。イベント動作の類似性に基づいてユーザーをクラスターにグループ化するペルソナ。ユーザーが製品で何をしているかを示すセグメンテーション。ファネル分析では、ユーザーが定義されたイベントパスをどの程度うまくナビゲートしているかについての洞察を提供します。

もう 1 つの重要な機能は、繰り返し統合です。 Amplitude を採用する前は、Iteratively を使用してプラットフォーム間の分析の一貫性を向上させることを考えていました。幸いなことに、Amplitude は評価の頃に反復的に取得されました。彼らは Iteratively をデータガバナンスツールに統合し始めており、リリースインストルメンテーションに関する優れたプロセスを作成するチームを構築する際に活用しています。 Amplitude を使用すると、乱雑な履歴データを修正するための変換のセットアップと管理がはるかに簡単になります。

すべてのイベントドキュメントを data.amplitude.com に移行し、何百ものイベントをゆっくりと移動しています。初めて、一貫性のないインストルメンテーションがどこにあり、どこにプロパティが欠落しているかについて、はるかに優れた感覚を得ています。過去にギャップがあった場所を確認し、それらのエラーをその場で修正できます。したがって、これらの不正な形式のイベントを含む古いレポートでも、貴重な洞察を提供できます。

これらの新たに発見されたユーザーの洞察はすべて、私たちのチームにとって刺激的です。なぜなら、バーティカルソーシャルフードコミュニティは、完全にアルゴリズムによって駆動されるものよりも魅力的である可能性があることを示しているからです。ユーザーが実際に料理をしたり、フォローしているユーザーから返信したり、節約したりしているのを見ることができるという事実は、私たちの中心的な仮説が機能していることを示しています。

世界クラスのインフラストラクチャへの明確な道筋

Amplitude 内での実験は、製品変更の影響を測定する際の当て推量を排除し、データの信頼を回復するのに役立ちます。 Amplitude のおかげで、すでにやるべきことがあったデータに基づく文化を構築することができました。

データに基づいた文化は、迅速かつ効果的で持続可能な製品の成長につながります。

テストと追跡の改善に向けて前進する中で、Whisk は世界クラスのデータと実験インフラストラクチャを作成し、Samsung コミュニティの他の模範となる立場にあります。私たちの文化はこれまで以上にデータに精通しており、それが Whisk の迅速かつ効果的で持続可能な成長につながっています。