O obstáculo à experimentação em escala é cultural, não técnico
Empresas que não conseguem escalar experimentação raramente têm problema de ferramentas ou tecnologia. O obstáculo é cultural: crenças compartilhadas que tornam a falha inaceitável, a opinião mais importante que dados, e a experimentação uma atividade de especialistas — não de todos.
Evidências / exemplos
- Booking.com: 25.000+ experimentos/ano, com apenas 10% de taxa de sucesso. Funciona porque a cultura aceita que 90% das ideias não funcionam e isso é parte do processo.
- IBM: em 2015, apenas 1 especialista controlava a experimentação como gatekeeper e rejeitava propostas. Resultado: 97 testes/ano. Em 2018, após democratizar (5.500 marketers com ferramentas acessíveis): 2.822 testes/ano — crescimento de 29x sem mudança tecnológica.
- HiPPO problem: executivos vetam experimentos antes de começar ou rejeitam resultados que contradizem sua opinião — matando o ciclo de aprendizado.
- Viés de aversão à falha: empresas que enfatizam eficiência e “vencer” veem as falhas de experimentos como desperdício — o que reduz o volume e aumenta o custo emocional de cada falha.
Objeções e nuances
- A infraestrutura técnica é pré-condição, mas não suficiente — sem cultura, a ferramenta fica subutilizada
- A democratização tem riscos (experimentos mal desenhados, métricas erradas), que exigem treinamento e suporte — não é apenas “liberar acesso”
Implicações
- Antes de investir em plataformas de A/B testing, avaliar as crenças culturais sobre falha e autonomia
- Liderança deve dar o exemplo: submeter suas próprias ideias a experimentos e aceitar quando os dados contradizem sua intuição
- Reframing necessário: falhas de experimentos não são desperdício — são o preço da aprendizagem sistemática
Fonte: Building a Culture of Experimentation - Thomke — Stefan Thomke