Intensivo Grátis 21–22/11Intensivo gratuito de 2 dias em Vibecoding (21–22/11 às 16:00 MSK) · Turma 3 começa 23/11Inscrever-se grátis →Turma 3 (23/11)
LançamentoAnálise · No radarAWS Machine Learning Blog→ original

AWS: cadeia de 10 agentes com 95% de confiabilidade cada entrega apenas 59,9% de sucesso

Os sistemas multiagente costumam falhar não por causa do modelo, mas por causa das passagens de bastão entre os agentes. Se cada uma das 10 etapas da cadeia funciona em 95% dos casos, só 59,9% das execuções chegam ao fim sem falha. Com 20 etapas, o índice cai para 35,8% (sem novas tentativas). Por isso, a AWS recomenda começar com um fluxo rigidamente definido e deixar o modelo escolher o caminho apenas quando as etapas não puderem ser descritas com antecedência.

Processado por IA de AWS Machine Learning Blog; editado por Hamidun News
AWS: cadeia de 10 agentes com 95% de confiabilidade cada entrega apenas 59,9% de sucesso
Fonte: AWS Machine Learning Blog. Colagem: Hamidun News.
Ouvir artigo
Ficha técnica e números-chave
ParâmetroDados
Fonte originalAWS Machine Learning Blog ↗
Editor-chefe
Dado-chave #1Um God agent com 15 ou mais ferramentas em um único prompt se confunde na escolha; o limite é cinco
Dado-chave #2Repetições infinitas, sem limite, queimam tokens: a parada precisa estar no código
Dado-chave #3Debates entre agentes são o padrão mais caro e só se justificam em decisões raras e de alto custo

Imagine um pipeline de agentes: o primeiro extrai dados de um documento, o segundo os transforma, o terceiro valida e o quarto envia o resultado adiante. Na demonstração, tudo funciona. Em produção, o sistema passa a entregar lixo com frequência.

Em sua análise, a AWS explica que a culpa geralmente não é do modelo, mas da coordenação. Trata-se de um problema clássico de sistemas distribuídos, e muitas equipes que se aventuram nele ainda não têm os hábitos de engenharia necessários. Daí vem o principal número: se cada uma das 10 etapas da cadeia funciona em 95% dos casos, apenas 59,9% das execuções percorrem todo o caminho sem falha.

Com 20 etapas, o índice é de apenas 35,8%. O cálculo é simplificado, pois pressupõe uma cadeia estritamente sequencial e sem novas tentativas, mas a direção é clara: cada passagem extra entre agentes multiplica o risco.

Na prática, a conclusão é esta: antes de adicionar agentes, vale avaliar se eles são realmente necessários. Segundo dados citados pela AWS, cerca de 88% dos pilotos de IA não chegam à produção. Um estudo do Stanford HAI mostrou que dois modelos trabalhando em conjunto podem render menos do que qualquer um deles isoladamente, se o custo de coordenação for maior que o benefício.

Dois níveis de padrões: quem escolhe o caminho

A AWS divide os esquemas de coordenação conforme quem controla o fluxo de trabalho. No primeiro nível, o caminho é definido pelo desenvolvedor; no segundo, é o modelo que o escolhe durante a execução. A segunda opção é mais flexível, mas custa mais tokens, é mais lenta e mais difícil de depurar. A regra prática: comece pelo primeiro nível e passe a tarefa para o segundo apenas se as subtarefas surgirem ao longo do trabalho.

Primeiro nível (fluxo rígido):

  • Pipeline sequencial: A → B → C. A ordem é conhecida de antemão, então é fácil de testar e o custo é previsível. Serve para processamento de documentos, ETL e análise de solicitações de garantia.
  • Workflow condicional: depois de uma verificação, o trabalho segue por uma ramificação. Por exemplo, o código foi escrito, mas os testes falharam: ele volta ao autor no máximo N vezes e, depois, é escalado para uma pessoa. O limite é garantido pelo orquestrador, como o limite de iterações no AWS Step Functions.
  • Roteador: um classificador lê a solicitação e a envia a exatamente um especialista, seja de qualidade, de manutenção ou de agendamento.
  • Workflow paralelo: a tarefa é dividida em partes independentes e os resultados são consolidados depois. A latência equivale à do agente mais lento, e não à soma de todos. Se uma ramificação falha, só ela é repetida.

Segundo nível (o modelo escolhe o caminho):

  • Orquestração por plano: um agente planejador mantém uma lista explícita de tarefas, e os executores, sem estado, veem apenas o seu trecho. Se um deles falha, os demais não são afetados.
  • Transferência de controle (handoff): um agente repassa a tarefa a um colega junto com o estado verificado e as evidências. Se o que foi passado é só um resumo no chat, isso não é um handoff.
  • Diálogo entre agentes: um chat compartilhado, em que a ordem das falas é definida por rodízio ou pelo modelo, e o estado fica armazenado no histórico da conversa.
  • Debate e consenso: vários agentes avaliam de forma independente a mesma entrada, e a decisão cabe à maioria ou a um juiz. É o padrão mais caro: em tarefas de percepção, ele compra latência, não precisão. Convém reservá-lo para decisões raras, em que o erro custa mais do que a discussão.

Na prática, a maioria dos sistemas em produção é híbrida: fluxos rígidos para as partes bem compreendidas e agentes autônomos onde é preciso flexibilidade.

Cinco antipadrões que queimam orçamento

  1. God agent. Um único agente responde pela análise de eficiência de equipamentos, pelo diagnóstico de controladores e pela manutenção, com 15 ou mais ferramentas em um só prompt. A escolha da ferramenta piora e os erros ficam difíceis de atribuir. O melhor é usar vários agentes, com no máximo cinco ferramentas cada.
  2. Repetições infinitas. O agente fica em loop de "tente de novo" sem uma parada rígida. Nenhuma chamada dispara alarme, mas os tokens vão embora. O teto de iterações, o limite de tokens por agente e o sinal de orçamento com parada automática precisam estar no código. O próprio modelo não vai parar.
  3. Contratos em linguagem natural. Os agentes trocam texto sem esquema. "Possível desgaste" vira "desgaste confirmado" e, em seguida, uma ordem de reparo. A deriva acontece entre os agentes, justamente onde o rastreamento é mais frágil.
  4. Multiagente prematuro. Cada agente adicional cria um imposto de coordenação não linear, e o ganho chega a um platô em cerca de quatro agentes. O teste: se um único agente dá conta apenas alternando entre grupos de ferramentas, o problema não é multiagente.
  5. Agente sem proteção na fronteira com o cliente. E-mails, visitas de serviço e parâmetros de máquinas são disparados sem confirmação. As alucinações chegam ao mundo físico, e a responsabilidade escala de um reembolso até a responsabilidade pelo produto. A AWS propõe uma proteção em camadas: recomendação, Amazon Bedrock Guardrails, validação de esquema, regras de negócio, aprovação humana e só depois a execução.

O que levar para a prática

Escolha a arquitetura mais simples que atenda aos requisitos. Se o esquema pode ser desenhado em um quadro antes da execução, comece pelo primeiro nível. Mantenha limites, esquemas de dados e regras de segurança na infraestrutura e no código, não nos prompts. Na indústria, somam-se a isso o takt time da linha, os limites de segurança, os dados na borda e os ciclos de turno: são esses fatores que determinam qual esquema é adequado.

História

Perguntas frequentes sobre a notícia

O que se sabe sobre Dois níveis de padrões: quem escolhe o caminho?

A AWS divide os esquemas de coordenação conforme quem controla o fluxo de trabalho. No primeiro nível, o caminho é definido pelo desenvolvedor; no segundo, é o modelo que o escolhe durante a execução. A segunda opção é mais flexível, mas custa mais tokens, é mais lenta e mais difícil de depurar. A regra prática: comece pelo primeiro nível e passe a tarefa para o segundo apenas se as subtarefas surgirem ao longo do trabalho. Primeiro nível (fluxo rígido): Pipeline sequencial: A → B → C.

O que se sabe sobre Cinco antipadrões que queimam orçamento?

God agent. Um único agente responde pela análise de eficiência de equipamentos, pelo diagnóstico de controladores e pela manutenção, com 15 ou mais ferramentas em um só prompt. A escolha da ferramenta piora e os erros ficam difíceis de atribuir. O melhor é usar vários agentes, com no máximo cinco ferramentas cada. Repetições infinitas. O agente fica em loop de "tente de novo" sem uma parada rígida. Nenhuma chamada dispara alarme, mas os tokens vão embora.

O que levar para a prática?

Escolha a arquitetura mais simples que atenda aos requisitos. Se o esquema pode ser desenhado em um quadro antes da execução, comece pelo primeiro nível. Mantenha limites, esquemas de dados e regras de segurança na infraestrutura e no código, não nos prompts. Na indústria, somam-se a isso o takt time da linha, os limites de segurança, os dados na borda e os ciclos de turno: são esses fatores que determinam qual esquema é adequado.

ZK
Zhemal Khamidun — CPO da Alpina Digital, gerente de produto do AlpinaGPT. Cria produtos de IA desde 2019. O Hamidun News é um projeto pessoal que virou um agregador em produção com mais de 6.000 leitores.
✦ Private AI Builders Community · Vibe Club

Ship AI Faster with Founders, Engineers & Weekly Architecture Reviews

Inside Vibe Club (hamidun.com/club) — weekly live masterminds with Zhemal Khamidun, Tech Radar, full LMS access, and 370+ production Claude Code skills.

Join Vibe Club →Explore Hamidun Academy
O que você acha?
Carregando comentários…