Learning Prototype Geração de Testes de API a partir do Swagger e Custo de Tokens (2025-06-05)
Entre para ler os trechos da transcrição de cada capítulo e perguntar ao Labinho sobre esta sessão.
O Labinho é o assistente que responde com as notas e as sessões do LabS e mostra de onde tirou cada resposta.
Notas citadas nas anotações desta sessão.
A sessão apresentou um protótipo para geração automatizada de testes de API a partir de documentação Swagger. A solução extrai do endpoint informações como método HTTP, URL, parâmetros, tipos de dados e exemplos de requisição, organiza esse conteúdo por meio de lógica convencional e só então utiliza um modelo de linguagem para gerar cenários de teste, reduzindo significativamente o consumo de tokens em comparação com o envio do Swagger bruto. Também foi demonstrada a geração de documentação em Markdown, posteriormente convertida para HTML e PDF, além do registro de entradas, saídas e custos das chamadas ao modelo.
Os testes realizados indicaram que o protótipo conseguiu criar cenários de sucesso e de erro, identificar conflitos como e-mails já cadastrados e produzir explicações dos resultados. A preparação cuidadosa dos dados de entrada, as regras de saída e a distinção entre endpoints semelhantes reduziram bastante as alucinações, embora ainda tenham surgido problemas no projeto testado, como retornos 500 inesperados e dados de exemplo repetidos. Também foi discutido que a solução possui características de agente, como geração de tarefas, execução de ações, histórico resumido e possível chamada de outras funções, mas ainda não constitui um agente completo por ter autonomia limitada.
Como conclusão, destacou-se que a arquitetura deve priorizar custo-benefício, usando modelos menores ou lógica determinística em etapas simples e reservando modelos mais caros para tarefas que realmente exigem raciocínio. Permaneceram em aberto o refinamento dos prompts e das validações, a correção dos erros da API, a evolução do protótipo para uma abordagem mais agentiva e a possível integração com MCP e outros projetos. Também foi sugerido publicar o código para revisão técnica e continuar avaliando consumo de tokens, qualidade dos testes e alternativas de implementação.