Um quarto dos pull requests em projetos open source é "AI slop", aponta Linux Foundation

Os mantenedores de projetos de código aberto já reclamavam havia tempo, e agora a queixa ganhou número. Segundo uma pesquisa da Linux Foundation divulgada na terça-feira (20/10), um em cada quatro pull requests (as propostas de alteração de código enviadas aos projetos) é considerado "AI slop", termo usado para o conteúdo de baixa qualidade gerado por inteligência artificial. Nos projetos grandes, a fatia sobe para 31%.

O relatório, chamado Navigating Open Source Software Development in the Generative AI Era, ouviu 234 contribuidores e mantenedores e foi apresentado na conferência All Things Open, em Raleigh, nos Estados Unidos. O estudo foi patrocinado pela Red Hat, com apoio de Futurewei, OpenSSF e LF AI & Data.

Mais contribuições, menos confiança

O volume cresceu: 59% dos mantenedores dizem que o número de contribuições aumentou desde a popularização da IA generativa, índice que chega a 69% nos projetos grandes. Além disso, 71% concordam que a IA reduziu a barreira de entrada para participar de um projeto, mas 53% discordam de que ela tenha melhorado a confiança dentro da comunidade.

O ganho de produtividade, por outro lado, é real. Os participantes estimam redução de tempo em todas as seis atividades medidas, de 19% nas discussões de propostas a 52% na escrita de código. Em tarefas de alta complexidade, porém, 21% dizem que a IA fez o trabalho demorar mais. O tempo poupado volta para os projetos: 66% usam a folga para pagar dívida técnica, 63% para criar funções novas e 58% para estudar.

Imagem: Linux Foundation

Regras ainda não acompanharam

Só 35% dos projetos têm uma política formal que permite o uso de IA generativa, enquanto 32% não têm política nenhuma e nem planejam ter. Entre os contribuidores, 61% dizem revisar e testar por completo o código gerado antes de enviar, mas a declaração do uso de IA segue inconsistente. Na mentoria, 46% acham que a IA aumentou a necessidade de orientar novatos, contra 32% que acham o contrário.

"Os projetos open source precisam se preparar para uma base crescente de contribuidores gerados por IA, e não apenas reagir a ela", afirmou Hilary Carter, vice-presidente sênior de pesquisa da Linux Foundation. Ela defende expectativas claras sobre o uso de IA, responsabilidade de teste e de declaração para quem envia o código e ferramentas melhores para os mantenedores filtrarem o que recebem.

Na mesma linha, Mark Collier, gerente-geral de IA e infraestrutura da fundação, disse que o investimento em ferramentas de IA precisa andar junto com o investimento em mantenedores, mentoria e confiança. O relatório completo está disponível gratuitamente no site da Linux Foundation.

Fonte: Linux Foundation