QA
Faça um teste de pressão da definição de uma skill de agente
Um desafio reproduzível à definição de uma skill de agente que testa clareza dos gatilhos, completude das instruções, suposições sobre ferramentas e comportamento seguro de fallback antes da publicação.
O processo
Faça nesta ordem.
- Capture o arquivo exato da skill, a versão, a origem, a licença, o frontmatter, o gatilho pretendido, os casos que não devem ativá-la e o comportamento que a skill promete produzir.
- Construa um conjunto de testes que cubra solicitações comuns, ambíguas, fora de escopo, entradas ausentes, ferramentas indisponíveis e instruções adversariais.
- Inspecione a definição para encontrar premissas ocultas sobre caminhos, contas, permissões, sequência, ações externas, evidências e formato de saída.
- Execute os casos em um ambiente isolado com uma matriz declarada de ferramentas e contas, usando Latch/target-workspace quando forem necessários arquivos privados ou evidências não públicas.
- Pontue cada resultado quanto à precisão de seleção, à adesão às instruções, à recusa segura, ao tratamento de evidências, à divulgação de incerteza e à utilidade do fallback.
- Revise uma fraqueza material por vez, execute novamente toda a regressão e inspecione o diff para encontrar restrições removidas ou capacidades recém-impostas.
- Publique um veredito de aprovação, aprovação condicional ou reprovação, com casos que falharam, passos de reprodução, evidências, riscos não resolvidos e um responsável por cada acompanhamento.
Traga isto
Entradas que o gato vai pedir.
- definição da skill e versão da origem
- gatilhos pretendidos e casos que não devem ativá-la
- ambiente de teste e matriz de ferramentas
- rubrica de aceitação e revisor
Roteador + um playbook
Roteie primeiro. Escolha um.
O Cat Paw carrega um playbook por tarefa, sem misturar vários. Comece por este roteador; os outros caminhos são candidatos específicos do workflow.
- Roteador:
software-delivery-pack skills/software-delivery-pack/skill-definition-pressure-test/SKILL.md
Limites
As fronteiras viajam com o prompt.
- Verifique as ferramentas, contas, permissões e o espaço de trabalho reais antes de começar; nunca afirme que uma ferramenta, conta, fonte ou capacidade indisponível existe.
- Use Latch/target-workspace para código privado, artefatos, sondagens ao vivo ou dados não públicos; se esse acesso estiver indisponível, pare no limite e relate o bloqueio em vez de substituir por uma suposição.
- Pause para aprovação explícita antes de ações externas consequentes; retorne evidências, riscos não resolvidos, premissas e qualquer ação que ainda esteja aguardando aprovação.
Pronto significa
Um fim que dá para checar.
Um relatório documentado de teste de pressão exercita a skill em casos representativos e adversariais, registra falhas reproduzíveis e dá um veredito de publicação defensável com evidências e riscos não resolvidos.
Fontes
De onde veio este processo.
- github.com/obra/superpowers/tree/5bf4e78011075bcfc0dc295f0724994cd123ee71/
- agentskills.io/specification
- platform.claude.com/docs/en/agents-and-tools/agent-skills/overview
As fontes estabelecem o padrão do workflow. Posts de Reddit e da comunidade, quando aparecem, valem como anedota de quem pratica — não como fato universal.
