Ferramentas visuais para usar ao conduzir experimentos

Palpites e pressentimentos só podem levá-lo até certo ponto. Para qualquer sucesso sustentado, os dados precisam estar no centro de qualquer processo de tomada de decisão. A capacidade de mudar, adaptar e melhorar quando novas informações são recebidas é fundamental para que as equipes de produtos e as empresas em geral se mantenham competitivas e tenham sucesso contínuo.

A implementação de uma maneira eficaz de conduzir experimentos oferece uma maneira de tomar melhores decisões, aprender mais rapidamente com os erros e confiar em resultados e fatos, não em preconceitos pessoais.

A realização de experimentos pode fornecer informações valiosas para sua empresa. Mas, conceber o experimento certo para a tarefa certa pode ser um desafio. Para realmente aprender com seus experimentos, você precisa gastar tempo criando aqueles que lhe darão resultados conclusivos. Concentrar seus esforços em alguns experimentos distintos que respondem a perguntas importantes fornecerá insights reais e benéficos que podem impulsionar melhorias no produto e ajudá-lo a atingir suas metas de longo prazo.

O teste e aprenda a filosofia

Envolve uma abordagem diferente de como as organizações veem os desafios de negócios. É um método que permite que as empresas tomem decisões estratégicas de longo prazo com base nos resultados que obtêm no curto prazo. Simplificando, é um conjunto de práticas que permitem que uma empresa experimente novas ideias e conceitos com um pequeno subconjunto de clientes e use os aprendizados para desenvolver uma estratégia. Você pode aprender mais sobre isso aqui.

Configurando o experimento

O planejamento e a implementação de experimentos bem-sucedidos envolvem um planejamento cuidadoso, priorização e análise, aqui estão algumas das etapas que você deve seguir ao planejar seu experimento:

Faça perguntas que gerem ideias

Todo experimento começa com um 'porquê'. Podem ser perguntas básicas que ajudam a gerar uma hipótese. As perguntas podem ser tão amplas quanto: “Por que minha taxa de conversão é de apenas 10%? Por que não tenho mais clientes recorrentes? O que não posso usar para fazer upsell para meus clientes?”

As perguntas formam uma base para idealizar e vêm com uma hipótese. Cada questão poderia resultar em várias hipóteses que poderiam ser testadas por meio de experimentação.

Crie uma hipótese

Uma hipótese é uma afirmação testável que pode ser provada ou refutada. Envolve olhar para as informações disponíveis e fazer um palpite ou previsão sobre a relação entre duas variáveis. Normalmente, as hipóteses consistem em declarações 'se-então'. Por exemplo,

Se oferecermos aos usuários uma avaliação gratuita , a taxa de conversão aumentará.

Se reduzirmos o número de etapas durante a inscrição , obteremos mais registros.

Se alterarmos a interface do aplicativo , obteremos mais downloads.

Em cada hipótese existem 2 variáveis, a variável 1 é uma variável independente, pois não depende da outra. A variável 2 é a variável dependente que mudará se a variável independente mudar.

Conduzindo o experimento

Você pode realizar experimentos de produtos usando o método de teste AB ou o método multivariado. O teste AB envolve duas variações do mesmo recurso, enquanto uma abordagem multivariada envolve testar muitas versões do mesmo recurso para encontrar o melhor desempenho.

Comunique seus resultados

Depois de realizar experimentos, você deve produzir resultados tangíveis, é importante encontrar uma maneira eficiente de comunicar suas descobertas com clareza e encontrar uma maneira de decidir quais devem ser seus próximos passos.

Lembre-se, ao realizar experimentos, saber o que não fazer também torna seu produto melhor.

4 ferramentas visuais para conduzir experimentos

Grade de suposições

Todo modelo de negócios opera com base em suposições, mas algumas suposições têm maiores consequências no negócio do que outras. Essa ferramenta visual simples ajuda a identificar quais são suas suposições mais arriscadas e ajuda a desenvolver uma melhor compreensão do impacto que elas terão em seus negócios.

A grade plota suas suposições em dois eixos, certeza e risco, então você pode avaliar suas suposições de alto impacto para as quais você tem poucas informações e suposições de baixo impacto que podem não ser muito importantes para o seu negócio. Visualizar suas suposições pode capacitá-lo a fazer julgamentos, priorizar, mitigar riscos e superar incertezas. Por meio dessa grade, você pode priorizar seus experimentos e decidir quais hipóteses precisam ser testadas imediatamente com base em como elas afetarão seus negócios no longo prazo.

Tela do experimento

O objetivo da tela de experimentos é ser capaz de projetar o experimento certo no momento certo. Ele fornece uma ferramenta para declarar claramente uma hipótese falsificável com base em sua suposição mais arriscada. Depois de identificar suas suposições mais arriscadas, você precisa encontrar uma maneira de testá-las e medi-las de maneira quantificável. A tela de experimentos permite que você divida suas suposições em experimentos mensuráveis ​​e observáveis.

Tela de oportunidade

Uma tela de oportunidades ajuda você a analisar seus negócios de maneira mais holística. Ele fornece contexto e é especialmente útil ao planejar o lançamento de novos recursos ou melhorias de produtos. Ele ajuda você a enquadrar melhor seus problemas ou ideias e fornece uma estrutura para decidir quais ideias você deve passar para o estágio experimental. Muitas vezes, há muitas ideias novas que achamos que deveríamos implementar, sem entender completamente o impacto que elas terão nos negócios ou como os usuários podem responder a elas. A tela de oportunidades orienta você sobre como os clientes usarão sua solução, possíveis contratempos, estratégias, desafios e métricas. Ele fornece uma boa base para determinar quais experimentos valem a pena levar adiante.

Matriz de Esforço de Impacto

O tempo e os recursos são sempre limitados, portanto, priorizar quais melhorias devem ser feitas em seu produto é sempre um desafio. A matriz de esforço de impacto ajuda você a categorizar ideias em 4 categorias, vitórias rápidas - que exigem esforço mínimo e fornecem altos retornos não precisam necessariamente ser testadas, pois não exigem muitos recursos. Você deve testar atividades de alto esforço em amostras menores antes de serem implementadas. Com essa matriz, ideias que exigem um esforço desproporcional para serem executadas, com resultados mínimos, devem ser desconsideradas. A matriz de esforço de impacto permite que você visualize todos os seus experimentos em potencial e decida a ordem em que eles devem ser executados. Você também pode decidir quanto tempo e energia devem ser gastos em cada um.

Estabelecendo uma cultura de experimentação

O valor de conduzir experimentos vai muito além dos resultados ou aprendizados que você obtém depois de conduzi-los. Construir uma cultura de experimentação em uma organização gera inovação; onde as perguntas são constantemente feitas e as melhorias são continuamente buscadas. A criação de um ambiente onde as teorias podem ser testadas imediatamente e as mudanças feitas de acordo, resulta em uma cultura mais participativa, onde as pessoas podem trocar ideias livremente.