Quando a OpenAI revelou seu modelo de IA o3 com “raciocínio” em dezembro, a empresa fez parceria com os criadores do ARC-AGI, um benchmark desenvolvido para testar inteligências artificiais altamente capazes, para demonstrar as aptidões do o3. Meses depois, os resultados foram revisados e agora parecem um pouco menos impressionantes do que inicialmente.
Na semana passada, a Arc Prize Foundation, responsável pela manutenção e administração do ARC-AGI, atualizou seus custos aproximados de processamento para o o3. A organização estimou originalmente que a configuração de melhor desempenho testada, o3 high, custava cerca de US$ 3.000 para solucionar um único problema do ARC-AGI. Agora, a Arc Prize Foundation acredita que o custo é muito maior — possivelmente em torno de US$ 30.000 por tarefa veja mais.
A revisão é notável, pois ilustra o quão caros os modelos de IA mais sofisticados podem se tornar para determinadas tarefas, pelo menos num primeiro momento. A OpenAI ainda não definiu o preço do o3 — nem sequer o lançou oficialmente. Entretanto, a Arc Prize Foundation acredita que o modelo o1-pro, atualmente o mais caro da OpenAI, possa servir de referência nessa comparação.
Segundo Mike Knoop, um dos cofundadores da Arc Prize Foundation, “acreditamos que o o1-pro é uma comparação mais próxima do custo real do o3, em função da quantidade de processamento utilizada durante os testes. Porém, isso ainda é apenas uma estimativa, e continuamos com o o3 rotulado como prévia em nosso ranking para refletir a incerteza até que o preço oficial seja anunciado.”
Um preço elevado para o o3 high não seria surpreendente, considerando a quantidade de recursos computacionais que o modelo supostamente utiliza. De acordo com a Arc Prize Foundation, o o3 high usou 172 vezes mais poder computacional do que o o3 low, a configuração de menor uso, para enfrentar os desafios propostos pelo ARC-AGI.
Além disso, circulam rumores há algum tempo sobre planos dispendiosos que a OpenAI estaria considerando para clientes corporativos. Em março, o The Information noticiou que a empresa pode planejar cobrar até US$ 20.000 por mês para o uso de agentes de IA especializados, como um agente desenvolvedor de software.
Alguns podem argumentar que mesmo os modelos mais caros da OpenAI terão um custo inferior ao que um contratado ou funcionário típico demandaria. Contudo, como apontou o pesquisador em IA Toby Ord em um post na plataforma X, os modelos podem não ser tão eficientes. Por exemplo, o o3 high precisou de 1.024 tentativas para cada tarefa no ARC-AGI a fim de atingir sua melhor pontuação.
