Restaurar la confianza en los datos y acelerar el crecimiento del producto con Amplitude

Es increíblemente frustrante escuchar a los gerentes de producto declarar: "No confío en estos datos, así que me limitaré a lo que pienso". Pero no siempre podemos culparlos por su desconfianza. Cada pequeña abolladura en la armadura de datos de una organización degrada la capacidad de un equipo para informarse sobre los datos. Y si los datos existentes son confusos o de difícil acceso, las personas no pueden usarlos para ayudar a que un producto crezca.

En Whisk, lo sabemos mejor que nadie. Puede ser difícil restaurar la confianza en los datos, y aunque teníamos un fuerte deseo de instrumentación y experimentación, no siempre había una manera de seguir adelante con lo que aprendimos. No teníamos una manera de respaldar nuestros enfoques de crecimiento con datos legítimos e información procesable.

Si sus datos existentes son confusos o de difícil acceso, las personas no pueden usarlos para ayudar a que un producto crezca.

Sin embargo, durante los últimos seis meses, Whisk ha encontrado un camino claro hacia una mejor gestión de datos. Como resultado, hemos podido arreglar el pasado, restaurar la confianza en nuestros datos y hacer crecer nuestra plataforma.

Encabezando el crecimiento de productos en Whisk

Whisk es una aplicación todo en uno para compartir y monetizar contenido de comida. Los usuarios pueden guardar recetas, planes de comidas y crear listas de compras para ahorrar tiempo en la preparación de comidas caseras. Samsung nos adquirió en 2019 y jugamos un papel importante en su estrategia de IoT.

Estamos trabajando en el desarrollo de toda la plataforma de alimentos para Samsung, creando todas las API que impulsan las experiencias relacionadas con los alimentos en las principales divisiones de la empresa. Hoy en día, docenas de electrodomésticos Samsung cuentan con tecnología Whisk, desde refrigeradores hasta hornos y estufas conectados.

Venir a Whisk fue una oportunidad increíble para mí. Inicialmente comencé a trabajar en la estrategia B2B2C, pero pronto cambiamos más nuestro enfoque a la experiencia del consumidor. En la transición, me convertí en Jefe de Producto, con la tarea de adoptar una perspectiva de crecimiento más orientada al producto. Quería expandir nuestra cultura de experimentación existente y mejorar nuestra toma de decisiones basada en datos.

Pero primero, necesitaba tener nuestra situación de datos bajo control.

Entender el problema de los datos

Los datos están en el corazón de lo que hacemos en Whisk. Fuera del análisis de productos, también hemos creado esta increíble ontología de alimentos que en sí misma es un producto de datos. El equipo tiene una sólida cultura de instrumentación analítica. Lo que no teníamos era organización.

No tengo formación técnica, pero he llegado a comprender dos cosas mientras trabajaba con científicos de datos. Primero, la gran mayoría del trabajo de datos consiste en asegurarse de que los datos sean observables y estén bien diseñados. En segundo lugar, los datos deben estar altamente disponibles y precisos para informar a las partes interesadas.

Cuando cambiamos nuestro enfoque a la experiencia del consumidor en 2021, puse en marcha nuestro primer equipo de crecimiento. No pasó mucho tiempo para ver que las brechas en nuestra pila tecnológica crearon obstáculos innecesarios para el crecimiento del producto.

• Teníamos demasiada instrumentación. Con cientos de eventos instrumentados de manera diferente en las aplicaciones, era difícil mantener una buena calidad de datos y darle sentido a todo. Nuestros equipos no estaban enfocados en los eventos clave.
• Tuvimos una gran brecha en nuestra experimentación. Cada vez era más difícil mantener un enfoque láser en nuestros principales KPI y métricas. Utilizamos múltiples plataformas de experimentación con diferentes capacidades, con la retención predeterminada como métrica principal. No era ideal para la cultura de crecimiento de alta velocidad que quería construir.

No estábamos buscando una nueva plataforma en ese momento. Ya éramos clientes de Mixpanel, pero la plataforma comenzó a desaprobar su funcionalidad de prueba A/B, lo que nos habría llevado en la dirección opuesta a donde quería ir.

Fue entonces cuando me vino a la mente Amplitud.

Migración de Whisk a Amplitude

Durante mucho tiempo había sido fanático de John Cutler, un evangelista de productos en Amplitude. John se ofreció a dirigir un taller de productos para cualquier persona de su red y me acerqué a él sobre el exceso de instrumentación y su impacto en la cultura de datos de Whisk. Durante el taller, reunimos a compañeros de equipo de control de calidad, ingeniería y diseño para examinar formas de identificar eventos clave en nuestro ciclo de vida. Fue una gran experiencia, y al final, John mencionó que es valioso tener su análisis y experimentación juntos y que Amplitude puede hacer ambas cosas.

Planeamos integrar SaaS de experimentación adicional en Mixpanel, pero cuanto más aprendí sobre Amplitude, más me impresionó su conjunto de herramientas todo en uno.

Para la experimentación, Amplitude evita que los PM miren los resultados demasiado pronto y obtengan resultados no concluyentes. Aunque no era la plataforma de experimentación más desarrollada del mercado, nos gustó la visión de Amplitude. También vimos el beneficio de tener todos nuestros datos y herramientas de experimentación en un solo sistema altamente observable. Podríamos rastrear a las personas que habían estado en experimentos de larga duración. Podríamos gestionar la independencia del experimento con bastante facilidad. Podríamos mantenernos enfocados en datos precisos. Así que saltamos.

Mejora de la innovación de productos

Pusimos a Amplitude a trabajar de inmediato, manejando gran parte de nuestra experimentación. Hemos estado ejecutando pilotos de ROI en varias oportunidades de monetización dentro de la base de usuarios principal, incluida una prueba A/B diseñada para medir el impacto de participación de publicar anuncios patrocinados en nuestro feed de inicio.

Al colocar más anuncios en nuestro feed de inicio, esperábamos una disminución en la profundidad de desplazamiento (que se correlaciona con la retención). Comparamos el feed de inicio actual de Whisk con uno que incluía una ubicación de anuncios específica y descubrimos un resultado sorprendente: ninguna diferencia.

Pero esto es solo el comienzo. Ahora estamos ejecutando varias pruebas a la vez y los PM están pensando de manera más inteligente sobre cómo realizar un seguimiento de los cambios y medir el compromiso de manera efectiva.

Amplitude nos ayuda a comprender los eventos en contexto, lo que ha llevado a un aumento en la creación y retención de contenido.

Amplitude nos ayuda a comprender los eventos en contexto, lo que ha llevado a un aumento en la creación y retención de contenido. Por ejemplo, desarrollamos una función llamada "Hecho", que solicita a los usuarios que agreguen notas, etiquetas e imágenes una vez que hayan preparado una receta. Después de docenas de iteraciones que arrojaron resultados mediocres, nos alejamos en Amplitud y examinamos dónde se correlacionaban las diferentes acciones de los usuarios. Al instante quedó claro que algunos usuarios querían más conexiones. No vieron el valor de publicar porque sí; querían alguien para quien publicar.

Usando esta información, ayudamos a las personas a encontrar y conectarse con otras personas que valoran y comparten sus ideas en la aplicación. Buscamos utilizar este conocimiento de nuevas maneras y actualmente estamos evaluando estrategias de monetización para un "fondo de creadores" basado en la participación impulsada por el contenido del usuario. Cuanto más aprendamos sobre cómo el contenido impulsa el compromiso, más podremos ofrecer.

También estamos respondiendo una gran cantidad de preguntas estratégicas y específicas de productos dentro de Amplitude. Actualmente, estamos trabajando para descubrir el punto de inflexión viral de las recetas, rastrear si las recompensas sociales son efectivas para generar un ciclo de hábitos y determinar la cantidad mágica de seguidores que crean un usuario activo. También entendemos mejor qué eventos de compromiso ocurren y con qué frecuencia durante ciertos días. El equipo de producto distribuye estos conocimientos a las partes interesadas y otros miembros del equipo de Samsung. Nuestros datos se citan ampliamente en investigaciones internas sobre los comportamientos culinarios de los consumidores en los EE. UU. y el Reino Unido, lo que impulsa la innovación de productos y las estrategias de marketing.

Las características robustas nos ayudan a capitalizar un nuevo mercado

La estrategia principal de Whisk incluye la creación de un motor de compromiso continuo y obtener una mayor visibilidad de los tipos de usuarios. Una gran prioridad es comprender y capitalizar un mercado que aún no se ha conquistado: la comunidad alimentaria social vertical.

Antes de usar Amplitude, teníamos un enfoque único para las acciones clave de participación con una alta probabilidad de retención. Hoy en día, es fácil hacer un análisis de agrupación y correlación de diferentes segmentos dentro de Amplitude, identificando diferentes personas y creando viajes más personalizados y adaptados. Y todo se hace con un solo clic.

Whisk aún mantiene una cultura de inicio a pesar de su rápido crecimiento, por lo que todos en la organización inician sesión en Amplitude para hacer su trabajo. Esta democratización de los datos significa que más personas pueden recopilar información, y esta información suele ser más impactante que las anteriores de Mixpanel. El uso de Amplitude en Whisk incluye analistas de datos, PM, equipos de marketing e ingeniería y ejecutivos. Incluso el equipo de asociaciones se involucra de vez en cuando. Los gráficos y paneles de amplitud están disponibles públicamente para todo el equipo, lo que ahorra mucho tiempo.

Usamos regularmente Compass, que muestra cómo los eventos de nuevos usuarios se correlacionan con la retención; Personas, que agrupa a los usuarios en grupos en función de las similitudes de su comportamiento en eventos; Segmentación, que muestra lo que los usuarios están haciendo en el producto; y Funnel Analysis, que ofrece información sobre el éxito con el que los usuarios navegan por una ruta de eventos definida.

Otra característica esencial para nosotros es la integración iterativa. Antes de nuestra adopción de Amplitude, habíamos pensado en usar Iteratively para mejorar la consistencia de los análisis en todas las plataformas. Afortunadamente para nosotros, Amplitude se adquirió iterativamente en el momento de nuestra evaluación. Comenzaron a integrar Iteratively en sus herramientas de gobierno de datos, que estamos aprovechando a medida que construimos el equipo que está creando procesos estelares en torno a la instrumentación de lanzamiento. Con Amplitude, las transformaciones para arreglar cualquier dato histórico desordenado son mucho más fáciles de configurar y administrar.

Hemos migrado toda nuestra documentación de eventos a data.amplitude.com y avanzamos lentamente a través de cientos de eventos. Por primera vez, tenemos una idea mucho mejor de dónde hay instrumentación inconsistente y dónde faltan propiedades. Podemos ver dónde tuvimos lagunas en el pasado y corregir esos errores sobre la marcha. Por lo tanto, incluso los informes antiguos con estos eventos mal formados pueden ofrecer información valiosa.

Todos estos nuevos conocimientos de los usuarios son emocionantes para nuestro equipo porque nos muestran que una comunidad de comida social vertical puede ser más atractiva que una impulsada completamente por algoritmos. El hecho de que podamos ver a los usuarios cocinando, luego respondiendo y ahorrando más de las personas a las que siguen muestra que nuestra hipótesis central está funcionando.

Un camino claro hacia una infraestructura de clase mundial

La experimentación dentro de Amplitude elimina las conjeturas al medir el impacto de los cambios en los productos, lo que nos ayuda a restaurar la confianza en los datos. Amplitude nos permitió construir la cultura basada en datos que ya teníamos las piezas para hacer.

Una cultura basada en datos puede conducir a un crecimiento de productos rápido, eficaz y sostenible.

A medida que avanzamos hacia la mejora de las pruebas y el seguimiento, Whisk está en posición de crear una infraestructura de datos y experimentación de clase mundial y convertirse en un ejemplo para el resto de la comunidad de Samsung. Nuestra cultura se basa más en datos que nunca, lo que ha llevado al crecimiento rápido, eficaz y sostenible de Whisk.