Desafio 1 Interpretação de Artefatos com IA em Protótipos de Tela (2024-06-26)
Entre para ler os trechos da transcrição de cada capítulo e perguntar ao Labinho sobre esta sessão.
O Labinho é o assistente que responde com as notas e as sessões do LabS e mostra de onde tirou cada resposta.
Notas citadas nas anotações desta sessão.
A sessão apresentou o segundo ciclo do Solutis Labs, voltado à ampliação do repertório em testes autônomos. O trabalho foi organizado em três etapas: interpretar artefatos com IA, gerar artefatos para testes e testar a aplicação, registrando resultados e possíveis bugs. Foram explicados os formatos esperados para os desafios, incluindo uma visão geral, sugestões de testes, percepções dos participantes e, quando possível, comparação entre diferentes ferramentas de inteligência artificial. Também foi reforçado que os desafios podem ser realizados individualmente ou em grupo, com apoio da comunidade, gravações disponíveis e recompensas previstas conforme a complexidade da etapa.
O desafio demonstrado utilizou um protótipo de cadastro de livros como entrada para diferentes IAs. Uma ferramenta conseguiu identificar corretamente diversos componentes da interface, como campos, menus, botões, imagens e restrições de tamanho, enquanto outra apresentou erros de interpretação, mas trouxe observações úteis sobre informações ausentes e possíveis melhorias. A partir dessas análises, foram sugeridos testes de interface, funcionalidade, validação de campos, imagens, usabilidade, segurança, desempenho, compatibilidade, acessibilidade, robustez e generalização. A principal conclusão foi que a IA pode acelerar a identificação de cenários e ampliar o repertório de testes, mas ainda depende da validação humana, pois pode inventar informações ou interpretar elementos incorretamente.
Como pontos em aberto, ficou a necessidade de explorar prompts mais especializados, personas voltadas a testes e ferramentas ou modelos treinados para esse contexto, além de comparar melhor as respostas das IAs. Também foi incentivada a participação nos próximos desafios e bancadas, com liberdade para apresentar os resultados em slides, vídeos ou outros formatos. Permaneceram dúvidas operacionais sobre a divisão das recompensas em trabalhos realizados em dupla e sobre os próximos encontros, que deverão continuar aprofundando a geração e a execução autônoma dos testes.