Fornecedores de Revisão de Código por IA: Autoperformance Garantida em Seus Próprios Benchmarks

Fornecedores de soluções de revisão de código baseadas em IA frequentemente divulgam benchmarks que eles mesmos projetam, nos quais suas ferramentas demonstram superar a concorrência. Contudo, essas avaliações dependem comumente de conjuntos de dados pequenos ou da identificação de bugs sintéticos, o que levanta questionamentos sobre a validade e a imparcialidade dos resultados apresentados.