Pular para o conteúdo
LabS Atlas
AI For Devs
Entrar

Loop de Validação entre Agentes

Ir para notas que citam esta
atualizado há 25 diasEntre para perguntar ao Labinho sobre esta notaO Labinho é o assistente que responde com as notas e as sessões do LabS e mostra de onde tirou cada resposta.

Loop de validação entre agentes é o padrão em que um agente avalia a resposta de outro e, se ela não basta, devolve para nova tentativa, até um limite de iterações.

O padrão aparece com vários nomes: gate, evaluator-optimizer, agente revisor, agente validador. Em todos os casos há um ponto de verificação que decide se a resposta gerada é suficiente; se for, o fluxo segue ou termina; se não for, a etapa se repete ou o fluxo toma outro caminho. É o mecanismo que dá a um sistema de agentes a capacidade de saber quando parar, uma das marcas que separam um agente autônomo de uma sequência fixa de passos, como discute Workflow versus Agente Autônomo.

Como o laço se organiza em um fluxo real

Um desenho típico começa com um agente que faz várias chamadas a modelos, por exemplo três, e sintetiza uma resposta. Um validador então confere se essa síntese atende ao que foi pedido antes de devolvê-la. Quando existe um Agente Orquestrador, é ele quem manda executar de novo, numa segunda ou terceira tentativa, se o resultado falhar.

Um fluxo de interpretação de história de usuário montado em LangGraph mostra o laço completo com cinco agentes. Um analisador verifica se a entrada é mesmo uma história de usuário e encerra o processo se não for. Um intérprete extrai os dados principais. Um revisor avalia a interpretação e diz se está boa. Um roteador decide, com base nesse parecer, se reenvia ao intérprete junto com o feedback ou se finaliza. O feedback do revisor é o que torna cada volta diferente da anterior.

O limite de iterações não é opcional

Sem teto, o laço vira custo

Um revisor que nunca se satisfaz mantém o fluxo girando indefinidamente. Em APIs pagas, cada volta consome tokens de entrada e saída, e o Custo de Tokens cresce sem entregar resultado.

Frameworks expõem esse teto como parâmetro de máximo de tentativas ou de iterações por nó. Um valor em torno de 3 é a recomendação usual; valores altos, como 40, servem para testes propositais de comportamento, e um limite de 10 iterações por nó aparece como meio-termo. Uma melhoria possível é detectar quando o modelo repete a mesma resposta várias vezes seguidas e interromper o laço para tentar outra abordagem, em vez de esperar o teto.

A qualidade do validador depende do modelo

O revisor é tão bom quanto o modelo que o executa. Com um modelo local pequeno, como um Llama de 3 bilhões de parâmetros, a qualidade da revisão cai bastante: o revisor chega a apontar como ausente uma informação que já está na interpretação, e o laço gira sem motivo. Em outro caso, um fluxo com modelo local não concluiu a tarefa nem com cerca de cinco tentativas, e resolveu rápido ao trocar para um modelo maior. Repetir não compensa falta de capacidade.

Há também uma dificuldade de fundo: um LLM usado como avaliador pode se perder na mesma ambiguidade de contexto que confundiu o agente avaliado.

Validador genérico ou protocolo por tipo de agente

Um validador precisa de um olhar específico para o tipo de saída que julga; conferir código de teste exige um prompt voltado a esse contexto. Construir um validador generalista que funcione bem para tudo é muito difícil. A alternativa mais viável é definir um protocolo que cada tipo de agente deve seguir, por exemplo um para Cypress, outro para Robot Framework, outro para Gherkin, e fazer o validador verificar a aderência a esse protocolo. Como todos os agentes respondem no formato definido, não é preciso um agente intermediário de saída entre os especialistas e o validador.