Padrões de A/B Testing Confiáveis: O Efeito dos Cantos Arredondados/Quadrados

Replicações em larga escala demonstram que arredondar os cantos de botões, na verdade, não produz um grande aumento em cliques . O estudo original apontou um crescimento de 55% na taxa de cliques (clickthrough rate) para botões arredondados, com um p value de 0.037. Contudo, pesquisadores posteriores julgaram que o teste tinha baixo poder estatístico.

Três testes de replicação subsequentes detectaram efeitos próximos de zero, dentro de intervalos de confiança de 95%. Um quarto teste pré-registrado, realizado na METRO Rússia por 16 semanas com mais de 7.4 milhões de usuários, encontrou resultados abaixo dos efeitos mínimos detectáveis . As evidências combinadas sugerem que o aumento original de 55% foi, provavelmente, um resultado exagerado, decorrente de uma baixa statistical power.