Pesquisa Avalia Performance de Modelos de Linguagem na Resolução de Desafios de Ciência de Dados

Uma equipe de professores e alunos da Penn State Great Valley analisou o desempenho de algoritmos de inteligência artificial, como o ChatGPT e o Claude, na resolução de desafios de programação voltados para a ciência de dados. Os modelos testados, conhecidos como grandes modelos de linguagem (LLMs), demonstram grande potencial para gerar códigos que auxiliam cientistas de dados a analisar e visualizar informações.

Durante a apresentação de seu trabalho na International Conference on Mining Software Repositories, a equipe destacou a capacidade dos LLMs em realizar tarefas de programação com precisão, além de explorar os limites e a confiabilidade desses algoritmos para produzir resultados exatos em desafios de codificação.

O estudo, que recebeu o Distinguished Paper Award da Special Interest Group on Software Engineering da Association for Computing Machinery, reforça o avanço da inteligência artificial aplicada à ciência de dados e estimula o desenvolvimento de novas abordagens para melhorar a geração automatizada de código.