Rétablir la confiance dans les données et accélérer la croissance des produits avec Amplitude

C'est incroyablement frustrant d'entendre les chefs de produit déclarer : "Je ne fais pas confiance à ces données, alors je vais me contenter de ce que je pense." Mais on ne peut pas toujours leur reprocher leur méfiance. Chaque petite brèche dans l'armure de données d'une organisation dégrade la capacité d'une équipe à devenir informée par les données. Et si les données existantes prêtent à confusion ou sont difficiles d'accès, les gens ne peuvent pas les utiliser pour aider un produit à se développer.

Chez Whisk, nous le savons mieux que quiconque. Il peut être difficile de restaurer la confiance dans les données, et même si nous avions un fort désir d'instrumentation et d'expérimentation, il n'y avait pas toujours de moyen d'aller de l'avant avec ce que nous avions appris. Nous n'avions aucun moyen de soutenir nos approches de croissance avec des données légitimées et des informations exploitables.

Si vos données existantes prêtent à confusion ou sont difficiles d'accès, les utilisateurs ne peuvent pas les utiliser pour développer un produit.

Au cours des six derniers mois, cependant, Whisk a trouvé une voie claire vers une meilleure gestion des données. En conséquence, nous avons pu réparer le passé, restaurer la confiance dans nos données et développer notre plateforme.

Fer de lance de la croissance des produits chez Whisk

Whisk est une application tout-en-un pour partager et monétiser le contenu alimentaire. Les utilisateurs peuvent enregistrer des recettes, un plan de repas et créer des listes de courses pour gagner du temps lors de la préparation de repas faits maison. Samsung nous a acquis en 2019 et nous jouons un rôle majeur dans leur stratégie IoT.

Nous travaillons au développement de l'ensemble de la plate-forme alimentaire pour Samsung, en développant toutes les API qui alimentent les expériences liées à l'alimentation dans les principales divisions de l'entreprise. Aujourd'hui, des dizaines d'appareils Samsung sont dotés de la technologie Whisk, des réfrigérateurs aux cuisinières et cuisinières connectées.

Venir à Whisk a été une opportunité incroyable pour moi. J'ai d'abord commencé à travailler sur la stratégie B2B2C, mais nous nous sommes rapidement concentrés davantage sur l'expérience client. Au cours de la transition, je suis devenu chef de produit, chargé d'adopter une optique plus axée sur les produits pour la croissance. Je voulais étendre notre culture d'expérimentation existante et améliorer notre prise de décision basée sur les données.

Mais d'abord, je devais maîtriser la situation de nos données.

Comprendre le problème des données

Les données sont au cœur de ce que nous faisons chez Whisk. En dehors de l'analyse des produits, nous avons également construit cette incroyable ontologie alimentaire qui en elle-même est un produit de données. L'équipe a une solide culture de l'instrumentation analytique. Ce que nous n'avions pas, c'était l'organisation.

Je n'ai pas de formation technique, mais j'ai compris deux choses en travaillant aux côtés de data scientists. Premièrement, la grande majorité du travail sur les données consiste à s'assurer que les données sont observables et bien conçues. Deuxièmement, les données doivent être hautement disponibles et exactes pour informer les parties prenantes.

Lorsque nous nous sommes concentrés sur l'expérience client en 2021, j'ai créé notre première équipe de croissance. Il n'a pas fallu longtemps pour voir que des lacunes dans notre pile technologique créaient des obstacles inutiles à la croissance des produits.

• Nous avions trop d'instruments. Avec des centaines d'événements instrumentés différemment selon les applications, il était difficile de maintenir une bonne qualité des données et de donner un sens à tout cela. Nos équipes n'étaient pas concentrées sur les événements clés.
• Nous avons eu une grosse lacune dans notre expérimentation. Il devenait de plus en plus difficile de maintenir une concentration laser sur nos principaux KPI et métriques. Nous avons utilisé plusieurs plates-formes d'expérimentation avec différentes capacités, en choisissant par défaut la rétention comme métrique principale. Ce n'était pas idéal pour la culture de croissance à grande vitesse que je voulais construire.

Nous n'étions pas à la recherche d'une nouvelle plateforme à l'époque. Nous étions déjà clients de Mixpanel, mais la plate-forme a commencé à déprécier sa fonctionnalité de test A/B, ce qui nous aurait emmenés dans la direction opposée à celle où je voulais aller.

C'est alors qu'Amplitude m'est venu à l'esprit.

La migration de Whisk vers Amplitude

J'étais depuis longtemps fan de John Cutler, un évangéliste des produits chez Amplitude. John a proposé de diriger un atelier sur les produits pour tous les membres de son réseau, et je l'ai contacté au sujet de la surinstrumentation et de son impact sur la culture des données de Whisk. Au cours de l'atelier, nous avons réuni des coéquipiers de l'assurance qualité, de l'ingénierie et de la conception pour examiner les moyens d'identifier les événements clés de notre cycle de vie. Ce fut une expérience formidable, et à la fin, John a mentionné qu'il est utile d'avoir vos analyses et vos expérimentations côte à côte et qu'Amplitude peut faire les deux.

Nous avions prévu d'intégrer une expérimentation SaaS supplémentaire sur Mixpanel, mais plus j'en apprenais sur Amplitude, plus je devenais impressionné par son ensemble d'outils tout-en-un.

Pour l'expérimentation, Amplitude empêche les PM de jeter un coup d'œil trop tôt dans les résultats et d'obtenir des résultats non concluants. Même s'il ne s'agissait pas de la plateforme d'expérimentation la plus aboutie du marché, nous avons aimé la vision d'Amplitude. Nous avons également constaté l'avantage d'avoir toutes nos données et nos outils d'expérimentation dans un seul système hautement observable. Nous pouvions suivre les personnes qui avaient participé à des expériences de longue durée. Nous pourrions gérer l'indépendance des expériences assez facilement. Nous pourrions rester concentrés sur des données précises. Alors on a sauté.

Amélioration de l'innovation des produits

Nous avons mis Amplitude au travail immédiatement, en gérant une grande partie de notre expérimentation. Nous avons mené des projets pilotes de retour sur investissement sur diverses opportunités de monétisation au sein de la base d'utilisateurs principaux, y compris un test A/B conçu pour mesurer l'impact sur l'engagement de la diffusion d'annonces sponsorisées sur notre flux d'accueil.

En plaçant plus d'annonces sur notre flux d'accueil, nous nous attendions à une diminution de la profondeur de défilement (qui est en corrélation avec la rétention). Nous avons comparé le flux d'accueil actuel de Whisk avec un autre qui incluait un placement publicitaire ciblé et avons découvert un résultat surprenant : aucune différence.

Mais ce n'est que le début. Nous exécutons maintenant plusieurs tests à la fois et les PM réfléchissent plus intelligemment à la façon de suivre les changements et de mesurer efficacement l'engagement.

Amplitude nous aide à comprendre les événements dans leur contexte, ce qui a entraîné une augmentation de la création et de la rétention de contenu.

Amplitude nous aide à comprendre les événements dans leur contexte, ce qui a entraîné une augmentation de la création et de la rétention de contenu. Par exemple, nous avons développé une fonctionnalité appelée "Made It", qui invite les utilisateurs à ajouter des notes, des balises et des images une fois qu'ils ont préparé une recette. Après des dizaines d'itérations qui ont donné des résultats médiocres, nous avons effectué un zoom arrière sur Amplitude et examiné où différentes actions de l'utilisateur étaient corrélées. Il est devenu instantanément clair que certains utilisateurs voulaient plus de connexions. Ils ne voyaient pas la valeur de l'affichage pour le simple plaisir de le faire; ils voulaient quelqu'un pour qui poster.

Grâce à ces informations, nous avons aidé les utilisateurs à trouver et à se connecter avec d'autres personnes qui apprécient et partagent leurs informations dans l'application. Nous cherchons à utiliser ces connaissances de nouvelles manières et évaluons actuellement des stratégies de monétisation pour un "fonds de créateurs" basé sur l'engagement généré par le contenu des utilisateurs. Plus nous en apprenons sur la façon dont le contenu stimule l'engagement, plus nous pouvons offrir.

Nous répondons également à une foule de questions stratégiques et spécifiques aux produits au sein d'Amplitude. Actuellement, nous travaillons à découvrir le point d'inflexion virale des recettes, à déterminer si les récompenses sociales sont efficaces pour créer une boucle d'habitude et à déterminer le nombre magique d'abonnés qui créent un utilisateur actif. Nous comprenons également mieux quels événements d'engagement se produisent et à quelle fréquence certains jours. L'équipe produit distribue ces informations aux parties prenantes et aux autres membres de l'équipe Samsung. Nos données sont largement citées dans les recherches internes sur les comportements culinaires des consommateurs aux États-Unis et au Royaume-Uni, ce qui stimule l'innovation des produits et les stratégies de marketing.

Des fonctionnalités robustes nous aident à capitaliser sur un nouveau marché

La stratégie principale de Whisk comprend la création d'un moteur d'engagement continu et l'obtention d'une plus grande visibilité sur les types d'utilisateurs. Une grande priorité est de comprendre et de capitaliser sur un marché qui n'a pas encore été conquis : la communauté alimentaire sociale verticale.

Avant d'utiliser Amplitude, nous avions une approche unique pour les actions d'engagement clés avec une forte probabilité de rétention. Aujourd'hui, il est facile d'effectuer une analyse de regroupement et de corrélation de différents segments au sein d'Amplitude, d'identifier différentes personnalités et de créer des parcours plus personnalisés et sur mesure. Et tout se fait en un seul clic.

Whisk maintient toujours une culture de startup malgré sa croissance rapide, de sorte que tout le monde dans l'organisation se connecte à Amplitude pour faire son travail. Cette démocratisation des données signifie que davantage de personnes sont en mesure de recueillir des informations, et ces informations ont généralement plus d'impact que les informations précédentes de Mixpanel. L'utilisation d'Amplitude dans Whisk inclut les analystes de données, les PM, les équipes de marketing et d'ingénierie et les cadres. Même l'équipe des partenariats s'en mêle de temps en temps. Les graphiques et tableaux de bord d'amplitude sont publiquement accessibles à toute l'équipe, ce qui permet de gagner beaucoup de temps.

Nous utilisons régulièrement Compass, qui montre comment les événements de nouveaux utilisateurs sont en corrélation avec la rétention ; Personas, qui regroupe les utilisateurs en clusters en fonction des similitudes de leur comportement d'événement ; La segmentation, qui montre ce que font les utilisateurs dans le produit ; et l'analyse de l'entonnoir, qui offre un aperçu de la manière dont les utilisateurs naviguent avec succès dans un chemin d'événement défini.

Une autre caractéristique essentielle pour nous est l'intégration itérative. Avant l'adoption d'Amplitude, nous avions pensé à utiliser Iteratively pour améliorer la cohérence des analyses entre les plates-formes. Heureusement pour nous, Amplitude a été acquise de manière itérative au moment de notre évaluation. Ils ont commencé à intégrer Iteratively dans leurs outils de gouvernance des données, que nous exploitons au fur et à mesure que nous construisons l'équipe qui crée des processus stellaires autour de l'instrumentation des versions. Avec Amplitude, les transformations pour corriger les données historiques désordonnées sont beaucoup plus faciles à configurer et à gérer.

Nous avons migré toute notre documentation sur les événements vers data.amplitude.com et parcourons lentement des centaines d'événements. Pour la première fois, nous avons une bien meilleure idée des endroits où il y a une instrumentation incohérente et où il y a des propriétés manquantes. Nous pouvons voir où nous avions des lacunes dans le passé et corriger ces erreurs à la volée. Ainsi, même les anciens rapports contenant ces événements malformés peuvent offrir des informations précieuses.

Toutes ces nouvelles informations sur les utilisateurs sont passionnantes pour notre équipe, car elles nous montrent qu'une communauté alimentaire sociale verticale peut être plus engageante qu'une communauté entièrement pilotée par des algorithmes. Le fait que nous puissions voir les utilisateurs cuisiner, puis répondre et économiser davantage des personnes qu'ils suivent montre que notre hypothèse de base fonctionne.

Une voie claire vers une infrastructure de classe mondiale

L'expérimentation au sein d'Amplitude élimine les approximations lors de la mesure de l'impact des changements de produits, ce qui nous aide à rétablir la confiance dans les données. Amplitude nous a permis de construire la culture basée sur les données que nous avions déjà en main.

Une culture basée sur les données peut conduire à une croissance rapide, efficace et durable des produits.

Alors que nous progressons vers l'amélioration des tests et du suivi, Whisk est en mesure de créer une infrastructure de données et d'expérimentation de classe mondiale et de devenir un exemple pour le reste de la communauté Samsung. Notre culture est plus basée sur les données que jamais auparavant, ce qui a conduit à la croissance rapide, efficace et durable de Whisk.