Sua IA Pode Estar Mentindo para Seu Chefe

É muito difícil medir a contribuição que os modelos de IA trazem para uma base de código. Por vezes, os melhores casos de uso para a IA são prompts investigativos que não necessariamente produzem qualquer código. Linhas de código não são uma boa métrica de qualidade, e pode ser complicado distinguir o trabalho realizado por engenheiros do que foi feito pela IA. Aparentemente, há um viés para reportar uma porcentagem maior de IA, o que é benéfico para empresas de IA, mas métricas distorcidas podem ser prejudiciais.