Libérez la puissance de l'expérimentation axée sur les produits avec notre nouveau guide

Dans le paysage concurrentiel d'aujourd'hui, l'expérimentation axée sur les produits est plus qu'une bonne idée, c'est une nécessité pour les équipes de produits et d'ingénierie de quantifier leur impact.Mais les équipes doivent cultiver une culture d'expérimentation et l'infuser à chaque phase du processus de développement de produits pour construire en toute confiance.

Nous nous sommes associés à Reforge pour créer un guide complet sur l'expérimentation axée sur les produits, présentant des idées et des conseils d'experts dans le domaine. Le guide aidera les équipes de produits et d'ingénierie à établir des programmes d'expérimentation et à libérer tout le potentiel de leurs produits. Dans cet article, nous vous donnerons un aperçu de ce à quoi vous attendre dans le guide.

Téléchargez le guide complet -Build with Confidence: Your Guide to Scaling Product-Led Experimentation- pour apprendre à créer une culture d'expérimentation, comprendre la pratique de l'expérimentation, hiérarchiser votre feuille de route d'expérimentation, et plus encore.

Pourquoi l'expérimentation est importante

Dans l'environnement concurrentiel d'aujourd'hui, l'expérimentation n'est pas facultative pour les équipes produit. C'est ce qui aide les équipes à créer des produits performants et innovants et à lier leur travail à l'ensemble de l'organisation.

Saleem Malkana, cadre en résidence chez Reforge, explique que l'expérimentation aide les équipes produit à mesurer l'impact de leur travail et à améliorer la stratégie produit. "Les meilleures équipes de produits savent que ce qui compte vraiment n'est pas seulement d'expédier ces résultats, mais plutôt les résultats qu'ils génèrent", explique-t-il.

Pour mesurer l'impact des changements de produits, les équipes doivent développer des hypothèses, mener des expériences et évaluer les résultats. Ils peuvent utiliser les résultats des expériences pour éclairer leur future stratégie produit.

Les tests sont également un moyen de réduire les risques liés aux changements de produits. Les équipes produit peuvent évaluer l'impact qu'aura une décision produit avant de la déployer auprès de tous les utilisateurs, ce qui pourrait entraîner des erreurs coûteuses.

Wil Pong, chef de produit pour Amplitude Experiment, affirme que l'expérimentation axée sur les produits permet une innovation plus rapide sans perturber les cycles de développement de l'ingénierie en utilisant davantage d'outils au niveau de la surface, comme les approches WYSIWYG.

Dans le passé, seules les grandes entreprises comme Netflix pouvaient proposer des expériences sur mesure et expérimenter différentes interfaces de produits ou moteurs de recommandation. Désormais, avec de nouvelles applications comme Amplitude Experiment, les organisations de toutes tailles peuvent itérer et affiner leurs produits en temps réel en fonction des besoins des utilisateurs.

L'expérimentation axée sur les produits permet aux équipes de produits de réaliser des expériences hautement ciblées sur l'ensemble de leurs produits à l'aide d'indicateurs de fonctionnalités, ce qui permet aux équipes de contrôler totalement l'activation ou la désactivation des expériences. Cela permet aux équipes de "livrer des expériences hautement ciblées et des versions de fonctionnalités en utilisant les mêmes processus et technologies qui alimentent le reste de [leur] développement de produits", ce qui entraînera finalement une innovation rapide sans perturber les équipes techniques, explique Wil.

L'expérimentation est également cruciale pour les chefs de produit, compte tenu des récents changements en matière de responsabilité. Bhavik Patel, fondateur et directeur général de CAUSL, explique que les organisations sont passées d'approches basées sur les résultats à des approches basées sur les résultats, en accordant plus d'attention aux chefs de produits. Bien qu'il soit difficile de mesurer le retour sur investissement des équipes produit (les organisations utilisent généralement les effectifs ou les heures d'ingénierie), le suivi de l'impact du produit par le biais de l'expérimentation aide l'équipe produit à lier son travail aux objectifs plus larges de l'entreprise.

Que signifie construire une culture de l'expérimentation

Une culture d'expérimentation devrait impliquer toutes les parties d'une organisation. Pour établir cette culture, les organisations doivent passer par un changement de mentalité et construire des systèmes et des processus concrets pour soutenir leur vitesse d'apprentissage, pas seulement une expédition rapide.

Saleem explique qu'une culture d'expérimentation n'est pas purement technique. C'est une combinaison de :

• Personnes : les membres de l'équipe sont axés sur les données.
• Processus et communication intégrés : l'expérimentation fait partie des processus de développement de produits avec une communication saine entre les équipes.
• Technologie : L'organisation utilise une plate-forme qui permet l'expérimentation.

Idéalement, l'expérimentation existera à tous les niveaux de l'organisation, en mettant l'accent sur le niveau de l'équipe - c'est ce qui crée la base de l'agilité et de l'adaptabilité. Les tests doivent également faire partie des opérations quotidiennes, afin que les équipes obtiennent un flux constant d'informations qu'elles peuvent utiliser pour améliorer le produit.

Pour créer une culture d'expérimentation, les équipes doivent développer un état d'esprit qui embrasse la curiosité et «l'échec», car les deux sont des mécanismes d'apprentissage. Pour générer une dynamique autour de l'expérimentation, il est également important de trouver un champion exécutif.

Un cadre qui achète dans l'expérimentation aidera à fournir des ressources comme le temps, le budget et les outils. Ils aideront également à créer des canaux de communication ouverte et de collaboration entre les départements.

En savoir plus dans le guide complet.

Comment commencer votre parcours d'expérimentation

La mise en place de programmes d'expérimentation dans une organisation prend du temps. Voici quelques bonnes pratiques pour commencer.

Commencez petit et évoluez

L'objectif ultime est de déployer l'expérimentation dans l'ensemble d'une organisation. Cependant, les organisations doivent commencer petit avec des tests à faible risque dans une équipe avant de passer à l'échelle.

Saleem recommande d'établir un « centre d'excellence : » une seule équipe qui devrait valider la pile d'expérimentation de base et construire à partir de là. Elena Verna, conseillère en croissance et responsable intérimaire de la croissance, explique : "une seule équipe doit d'abord apprendre à tester, à apprendre et à gagner".

Elle poursuit : « Une fois que cette équipe a développé des compétences et un état d'esprit d'expérimentation, elle devrait travailler à démocratiser l'accès aux tests et à l'apprentissage. De cette façon, toute l'organisation peut apprendre à gagner avec l'expérimentation. » En fin de compte, les membres de l'équipe de tous les départements devraient pouvoir exécuter des tests pour éclairer leurs décisions quotidiennes.

Bhavik suggère aux équipes de commencer par des tests à faible risque : "Je ne conseillerais pas de commencer par une expérience de tarification complexe, par exemple, mais c'est un excellent objectif à atteindre."

Il met également en garde contre le fait de s'accrocher à des chiffres irréalistes. La majorité des entreprises ne devraient pas essayer d'exécuter des milliers d'expériences. Au lieu de cela, "l'objectif devrait être d'effectuer plus de [tests] qu'ils ne l'ont fait le dernier trimestre ou l'année dernière", dit-il.

Idéer, valider, hiérarchiser

L'exécution d'expériences inutiles gaspille des ressources. Les équipes doivent donc être sélectives dans le choix des expériences à exécuter.

Commencez votre idéation avec un arbre métrique (un diagramme qui montre comment tous les éléments d'un produit évoluent vers les objectifs de l'entreprise) ou un diagramme solaire (un aperçu des flux de travail de votre organisation). L'examen de ces diagrammes vous donne une idée de l'endroit où concentrer vos efforts d'expérimentation.

Pour tester des idées, validez d'abord les concepts de test pour identifier les idées qui valent la peine d'être poursuivies. Pour valider, vous pouvez utiliser des tests de portes peintes, des recherches documentaires ou examiner les résultats d'expériences similaires.

Ensuite, considérez le temps nécessaire pour obtenir des informations sur chaque test potentiel. Elena insiste sur le fait que les équipes doivent donner la priorité à la vitesse d'apprentissage et tenir compte du temps qu'il faut pour construireune expérience, pas seulement pour l'exécuter. Saleem suggère également de diviser les grands défis en hypothèses testables plus petites pour obtenir une boucle de rétroaction plus rapide.

Parmi les autres facteurs à prendre en compte, citons :

• Le volume à différents points de votre produit, car vous avez besoin d'un trafic suffisant pour exécuter des tests
• Si le test que vous souhaitez exécuter peut être mesuré avec les outils d'analyse dont vous disposez

Une fois que vous avez validé vos idées de test, hiérarchisez les expériences à exécuter en fonction de :

• Votre capacité de test
• Quel impact vous attendez du test
• Dans quelle mesure êtes-vous convaincu que cela aura l'impact souhaité
• L'effort impliqué dans l'exécution du test

Concevez vos expériences en utilisant les meilleures pratiques

Bhavik explique que des expériences bien conçues sont enracinées dans la méthode scientifique. Ils peuvent être décomposés selon les étapes suivantes : planification avant l'expérience, suivi pendant l'expérience et analyse après l'expérience.

Une fois que vous avez validé vos idées d'expériences et choisi les tests à prioriser, vous devez planifier vos expériences. Documentez les raisons de l'exécution de l'expérience. Expliquez clairement ce qui est testé et modifié, qu'il s'agisse d'un changement de conception ou d'une nouvelle fonctionnalité ou expérience.

Élaborez une hypothèse et définissez des métriques de produit ou des KPI clairement définis pour votre expérience. Décidez des prochaines étapes en fonction des résultats possibles. Déterminez ce qui se passe lorsque chaque variante gagne ou si le test n'atteint pas la signification statistique.

Plongez plus profondément dans la planification de pré-expérience dans le guide complet.

Pendant l'expérience, créez un tableau de bord d'analyse pour surveiller en permanence le test. Après l'expérience, analysez les résultats et articulez le résultat. Ensuite, l'équipe peut avancer avec les prochaines étapes prédéterminées.

Construire en toute confiance

Pour plus de conseils sur la façon d'exécuter des programmes d'expérimentation réussis, téléchargez le guide d'expérimentation pilotée par le produit.