Resposta curta
Desenho de experimentos cria testes com hipótese explícita, medidas úteis e regras de decisão que geram evidências acionáveis.
Sobre Desenho de experimentos
Desenho de experimentos é a capacidade de estruturar um teste para que hipótese, método, medidas e regra de decisão reduzam a incerteza sobre uma escolha.
Use esta competência para
- Funções que testam premissas de produto antes de iniciar ou ampliar investimentos.
- Trabalhos em que evidências estruturadas podem orientar uma decisão.
Não use esta competência para
- Decisões que não podem ser testadas de forma ética ou dentro do prazo útil.
Diferenças importantes
Medição de resultados
O desenho de experimentos cria um teste para orientar uma decisão. A medição de resultados avalia se uma iniciativa produziu o efeito pretendido.
Expectativas por nível
IC1
Contribuidor individual 1
Com orientação, desenha um teste delimitado para uma premissa explícita. Lida com um método conhecido e define quais evidências sustentariam a próxima decisão.
Comportamentos observáveis
- Escreve uma hipótese que indica a mudança esperada e o grupo afetado.
- Escolhe uma medida diretamente ligada à premissa testada.
- Define a regra de decisão antes de coletar resultados.
Exemplos
- Antes de testar uma nova orientação na tela, registra a mudança esperada na conclusão e o limite para continuar.
- Em sessões com um protótipo, usa a mesma tarefa e os mesmos critérios de evidência com cada participante.
IC2
Contribuidor individual 2
Com autonomia, desenha testes para questões ambíguas e escolhe métodos adequados ao risco, público e prazo de decisão. Considera vieses e explicações alternativas.
Comportamentos observáveis
- Escolhe o método com base na incerteza, não apenas na ferramenta disponível.
- Define medidas de proteção e verifica mudanças que podem confundir o resultado.
- Registra limitações e não tira conclusões além do que as evidências permitem.
Exemplos
- Ao testar uma orientação de entrada, separa a ação-alvo de variações externas de tráfego.
- Diante de resultado misto, identifica qual evidência por segmento é útil e qual pergunta continua aberta.
IC3
Contribuidor individual 3
Define práticas de experimentação para o time e orienta testes com alta incerteza ou efeito amplo. Garante evidências comparáveis e evita conclusões inválidas em decisões de investimento.
Comportamentos observáveis
- Estabelece critérios de revisão para hipóteses, medidas e regras de decisão.
- Coordena testes que podem interferir entre áreas de produto conectadas.
- Contesta conclusões quando os limites do desenho não sustentam a decisão proposta.
Exemplos
- Quando times testam mudanças relacionadas, organiza a exposição para um teste não contaminar o outro.
- Antes de um teste amplo, exige medida de proteção e regra de interrupção para um risco relevante ao cliente.