Medir Menos para Aprender Mais: Usando Menos Métricas, mas de Maior Qualidade, para Capturar o que Importa

O Discord aprimorou a experimentação ao remover métricas redundantes, agrupar as relacionadas e focar em um conjunto reduzido de métricas "north-star" e de "guardrail" claramente definidas. A adição de muitas métricas a experimentos eleva as questões de multiple-testing e a correlação entre elas, o que pode demandar correções estatísticas mais rigorosas e dificultar a detecção de efeitos reais.