Estudo revela que ferramentas de IA deixam programadores mais lentos, mesmo achando o contrário

Um novo estudo colocou em xeque a ideia de que ferramentas de inteligência artificial estão tornando o trabalho dos desenvolvedores mais rápido.

Pelo contrário: segundo a pesquisa conduzida por cientistas da computação do grupo METR (Model Evaluation & Threat Research), o uso da IA pode, na verdade, desacelerar o processo de programação.

A pesquisa envolveu 16 desenvolvedores experientes que trabalham em grandes projetos de código aberto. Cada um recebeu tarefas reais, como correções de bugs e criação de novas funcionalidades, com a condição de realizá-las com ou sem a ajuda de IA, a decisão foi feita de forma aleatória.

Eles também estimaram o tempo necessário para cada tarefa. A expectativa era de que a IA trouxesse um ganho de 24% em produtividade, mas o resultado mostrou um cenário oposto: os desenvolvedores levaram, em média, 19% mais tempo para concluir os trabalhos com IA.

Mesmo após o estudo, os profissionais continuaram acreditando que a IA havia os ajudado a ganhar tempo, uma percepção que se mostrou incorreta.

Entre os principais motivos para o atraso estavam o excesso de otimismo, a familiaridade dos devs com os projetos (o que tornava a IA menos útil), a complexidade dos códigos, baixa taxa de aceitação das sugestões da IA e a dificuldade da ferramenta em entender o contexto do projeto.

Os pesquisadores ressaltam que esses dados não significam que a IA seja inútil no desenvolvimento de software, mas indicam que ela ainda tem limitações importantes em certos cenários.

Em vez de acelerar, a tecnologia acaba exigindo tempo extra com tarefas como escrever prompts, esperar respostas e revisar os códigos gerados.

Ou seja, apesar de tornar o trabalho mais interessante e interativo, a IA ainda não substitui a experiência humana na hora de entregar resultados eficientes.