Voltar às notícias
InovaçãoAI Understanding briefing

Novos relatórios de pré-impressão ganham com modelos de linguagem em loop na chamada de ferramentas em várias etapas

Um estudo arXiv avalia modelos de linguagem convencionais e em loop em três benchmarks de chamada de ferramentas, relatando resultados mais sólidos em fluxos de trabalho que exigem múltiplas chamadas de API dependentes e uma abordagem de computação adaptativa potencialmente mais eficiente.

Por 6 min read
Unlabeled network appliances linked by colored cables on a workbench in a university computing laboratory
A versão curta

Um estudo arXiv avalia modelos de linguagem convencionais e em loop em três benchmarks de chamada de ferramentas, relatando resultados mais sólidos em fluxos de trabalho que exigem múltiplas chamadas de API dependentes e uma abordagem de computação adaptativa potencialmente mais eficiente.

O que aconteceu

Os pesquisadores Andrei Cristian Popescu, Haitz Sáez de Ocáriz Borde e Pietro Liò relatam experimentos com modelos de linguagem em loop nativos e adaptados para chamada de ferramentas composicionais. O estudo compara modelos em loop e sem loop treinados com receitas de ajuste fino supervisionadas correspondentes em API-Bank, BFCL e NESTful. Seu resumo diz que a computação recorrente geralmente melhora o uso de ferramentas em várias etapas e com reconhecimento de dependência, enquanto a inferência adaptativa pode alocar computação extra apenas quando necessário.

O artigo, intitulado “Modelos de linguagem em loop melhoram a chamada de ferramentas de composição”, foi submetido ao arXiv em 17 de agosto de 2026 e é identificado na página de origem fornecida como versão 1. Sua questão central é se os modelos de linguagem em loop, que usam computação recorrente, podem melhorar o uso de ferramentas de agência. Os autores concentram-se em configurações de composição em vez de chamadas isoladas: um modelo pode precisar invocar várias APIs, transportar estados intermediários e preservar as dependências entre sucessivas interações de ferramentas. A fonte apresenta isto como uma área cujo potencial tem sido comparativamente subexplorado, e não como um produto concluído ou anúncio de implantação. A avaliação compara modelos com loop nativo e modelos adaptados com loop com modelos sem loop. O resumo diz que os modelos foram treinados sob receitas de ajuste fino supervisionadas, um controle importante destinado a tornar a comparação arquitetural mais significativa.

Os pesquisadores variam a profundidade recorrente no momento da inferência, permitindo que os modelos executem diferentes quantidades de computação recorrente. Eles testam os sistemas em três benchmarks nomeados: API-Bank, BFCL e NESTful. O resumo fornecido não fornece tarefas individuais, contagens de parâmetros do modelo, dados de treinamento, pontuações de linha de base ou protocolo de avaliação detalhado. O padrão relatado é mais forte para o uso de ferramentas em várias etapas. De acordo com os autores, a computação recorrente geralmente beneficia a chamada de ferramentas composicionais e com reconhecimento de dependência. A melhoria é descrita como menor e mais dependente do modelo específico quando a tarefa envolve apenas uma invocação isolada da API. O resumo também relata que a precisão no uso de ferramentas em várias etapas geralmente aumenta à medida que a profundidade recorrente aumenta. Isso indica que fornecer a um modelo mais computação interna pode ajudá-lo a coordenar uma sequência de chamadas, mas a fonte não diz que todos os modelos ou todos os benchmarks melhoraram, nem identifica uma única profundidade que funcione melhor.

O artigo destaca a inferência adaptativa como uma compensação mais favorável entre desempenho computacional do que aplicar a mesma computação extra em todos os lugares. Na descrição dos autores, a inferência adaptativa atribui computação adicional quando necessária, em vez de aumentar uniformemente a profundidade recorrente. A fonte fornecida não explica como o sistema decide quando mais computação é necessária nem quantifica o custo e a latência resultantes. Também não indica se o código, os pontos de verificação do modelo ou uma implementação voltada para o usuário estão disponíveis. A evidência aqui disponível é, portanto, o resumo e o registro bibliográfico dos autores, e não uma replicação independente ou um sistema de produção demonstrado.

Leia a fonte primária: arxiv.org

Por que isso importa

Os sistemas de chamada de ferramentas geralmente devem coordenar várias chamadas de API, preservar o estado intermediário e manter as dependências intactas. O estudo sugere que a adição de computação recorrente pode ajudar os modelos a gerir estes fluxos de trabalho, embora a fonte fornecida não estabeleça quão grandes são os ganhos, se são transferidos para sistemas ativos ou se a abordagem é mais barata em geral.

A importância prática decorre do tipo de tarefa que está sendo avaliada. Um modelo que usa ferramentas e que deve fazer uma chamada está resolvendo um problema mais restrito do que um sistema que precisa recuperar informações, usar esse resultado em uma segunda solicitação e manter o estado correto durante toda a sequência. Erros nessas cadeias podem surgir da seleção da ferramenta errada, do uso de informações intermediárias obsoletas ou incompletas ou da quebra de uma dependência entre chamadas. Os ganhos relatados no estudo são relevantes porque visam diretamente este problema de coordenação, em vez de tratar cada invocação de ferramenta como uma ação independente.

O resultado arquitetônico, se for mantido além das configurações testadas, poderá afetar a forma como os desenvolvedores alocam a computação do modelo. O aumento da profundidade recorrente parece melhorar a precisão em várias etapas nos experimentos dos autores, enquanto a inferência adaptativa é apresentada como uma forma de reservar computação adicional para casos mais difíceis. Essa combinação poderia ser útil para sistemas que enfrentam uma mistura de solicitações simples e complexas: chamadas simples não necessariamente incorreriam no custo total de um processamento mais profundo, enquanto fluxos de trabalho dependentes poderiam receber mais computação. A fonte não estabelece que a abordagem reduza os custos operacionais totais; uma compensação favorável numa experiência não é o mesmo que uma vantagem económica comprovada na implantação.

As descobertas por si só não mostram que os modelos em loop sejam agentes amplamente mais confiáveis. A fonte cita três benchmarks, mas não fornece resultados detalhados, intervalos de confiança, análise de falhas ou comparação com os sistemas de produção atuais. Ele não fornece evidências sobre erros de autorização, incidentes de privacidade, ações prejudiciais de ferramentas, respostas de API malformadas, limites de taxa, serviços indisponíveis ou revisão humana. Também não mostra que uma melhor precisão dos benchmarks leva a melhores resultados para consumidores, trabalhadores ou organizações. Essas limitações são importantes porque as falhas na chamada de ferramentas podem ter efeitos fora do modelo de linguagem, dependendo das permissões que as ferramentas conectadas fornecem.

O trabalho é melhor entendido como um resultado de pesquisa arquitetônica com possíveis implicações para futuros sistemas de agentes. É diferente dos itens de arquivo interno listados porque o candidato fornecido se concentra na computação recorrente para uso de API composicional, e não na certificação de agentes, comutação de adaptadores, desvios de segurança, consulta de dados corporativos ou outro ângulo factual listado. O registro arXiv estabelece que os autores conduziram e descreveram este estudo; não estabelece de forma independente a superioridade geral dos modelos em loop ou sua prontidão para uso prático.

O que assistir a seguir

O artigo completo deve esclarecer as pontuações relatadas, os tamanhos dos modelos, a implementação recorrente, os custos de inferência e a política de inferência adaptativa. São necessárias mais evidências sobre ferramentas invisíveis, chamadas de API com falha ou adversárias, fluxos de trabalho longos, latência, reprodutibilidade e se as melhorias de benchmark se traduzem em agentes implantados mais seguros e confiáveis.

A primeira prioridade é o conjunto completo de resultados quantitativos. Os leitores devem procurar pontuações divididas por benchmark, duração da tarefa, estrutura de dependência, família de modelos e profundidade recorrente. Será importante determinar se a tendência geral reportada é estatisticamente robusta ou impulsionada por um subconjunto de modelos ou tarefas. A redação do resumo – “geralmente” benéfica e “mais dependente do modelo” para chamadas isoladas – já sinaliza que o efeito não é uniforme. Categorias exatas de erros mostrariam se o loop melhora o planejamento, o rastreamento de estado, a seleção de ferramentas, a construção de argumentos ou vários deles ao mesmo tempo.

A história da computação também precisa de um exame minucioso. Passagens recorrentes adicionais podem aumentar o tempo de inferência, o uso de memória ou o consumo de energia, mesmo quando melhoram a precisão. O método adaptativo poderia alterar esse equilíbrio, mas a fonte fornecida não identifica sua regra de decisão nem relata seus custos indiretos. Evidências úteis de acompanhamento incluiriam distribuições de latência, custos de token e acelerador, o número de etapas recorrentes usadas por tarefa e resultados sob um orçamento de computação fixo. As comparações também devem testar se um modelo convencional maior, um contexto mais longo ou outro método de tempo de inferência alcança ganhos semelhantes com menor complexidade operacional.

A generalização é outra questão em aberto. Os benchmarks nomeados podem não capturar condições reais, como comportamento não documentado da API, limites de autenticação e permissão, falhas parciais, saídas de ferramentas conflitantes, alteração de esquemas, limites de taxa ou cadeias muito longas. Testes com APIs invisíveis e fluxos de trabalho interrompidos deliberadamente ajudariam a estabelecer se o modelo aprendeu uma capacidade de coordenação transferível ou se adaptou às convenções de benchmark. As avaliações de segurança devem examinar o que acontece quando uma ferramenta retorna instruções maliciosas, quando um modelo é pressionado a contornar uma restrição ou quando uma sequência aparentemente válida produziria uma ação externa indesejada.

Finalmente, a pesquisa deve ser avaliada quanto à reprodutibilidade e confirmação externa. A fonte fornecida é uma página abstrata do arXiv versão 1 e não indica se os autores lançaram código, pontos de verificação ou configurações completas. Implementações independentes usando a mesma configuração de ajuste fino podem testar se o efeito depende de um modelo específico, receita de treinamento ou interpretação de benchmark. Até que esses detalhes estejam disponíveis, a conclusão defensável é limitada: os autores relatam evidências de benchmark promissoras de que a computação recorrente pode melhorar algumas tarefas de chamada de ferramentas composicionais, enquanto a escala, o custo, a durabilidade e a segurança no mundo real da melhoria permanecem desconhecidos.

Guias e questionários relacionados

Achou isso útil?
O briefing semanal

Obtenha as histórias de IA que realmente importam.

Um e-mail útil por semana — o que mudou na IA, por que ela é importante, além de ferramentas, guias, oportunidades e formas práticas de agir.

Gratuito · Sem spam · Cancele a inscrição com um clique