Introdução
Pesquisadores, entre os quais se destaca Samy Bengio, diretor de Pesquisa em Inteligência Artificial e Aprendizado de Máquina de uma gigante de software e hardware, afirmam que a abordagem atual de benchmarking “frequentemente sofre com a contaminação de dados e não oferece insights sobre a estrutura e a qualidade dos traços de raciocínio”.
Análise do Estudo
Em um artigo contundente, pesquisadores da Apple lançaram um alerta sobre as capacidades de “raciocínio” das inteligências artificiais modernas. A pesquisa lança dúvidas sobre a efetividade dos métodos atuais de avaliação, indicando que eles não representam de forma adequada o desempenho real das tecnologias de IA.
Implicações para a Indústria
Essa conclusão se mostra surpreendente, especialmente considerando a posição delicada da Apple no cenário da inteligência artificial. Em meio à crítica aberta à trajetória atual da tecnologia, a empresa também anunciou a promessa de integrar uma série de ferramentas de Inteligência Apple em dispositivos como o iPhone e o MacBook, demonstrando um movimento estratégico mesmo diante das incertezas apontadas pela pesquisa.
