QA
Ponga a prueba la definición de una skill de agente
Un desafío reproducible para la definición de una skill de agente que evalúa la claridad de los desencadenantes, la integridad de las instrucciones, las suposiciones sobre herramientas y el respaldo seguro antes de publicarla.
El proceso
Hazlo en este orden.
- Captura el archivo exacto de la skill, la versión, el origen, la licencia, el frontmatter, el desencadenante previsto, los casos que no deben activarla y el comportamiento que promete producir.
- Construye un conjunto de pruebas que cubra solicitudes ordinarias, ambiguas, fuera de alcance, entradas ausentes, herramientas no disponibles e instrucciones adversariales.
- Inspecciona la definición para encontrar supuestos ocultos sobre rutas, cuentas, permisos, secuencia, acciones externas, evidencias y formato de salida.
- Ejecuta los casos en un entorno aislado con una matriz declarada de herramientas y cuentas, usando Latch/target-workspace cuando se necesiten archivos privados o evidencias no públicas.
- Puntúa cada resultado según precisión de selección, cumplimiento de instrucciones, rechazo seguro, tratamiento de evidencias, divulgación de incertidumbre y utilidad del fallback.
- Revisa una debilidad material cada vez, vuelve a ejecutar toda la regresión e inspecciona el diff para detectar restricciones eliminadas o capacidades recién implicadas.
- Publica un veredicto de aprobado, aprobado condicionalmente o fallido, con casos fallidos, pasos de reproducción, evidencias, riesgos no resueltos y un responsable para cada seguimiento.
Trae esto
Datos que el gato va a pedir.
- definición de la skill y versión del origen
- desencadenantes previstos y casos que no deben activarla
- entorno de pruebas y matriz de herramientas
- rúbrica de aceptación y revisor
Router + un playbook
Enruta primero. Elige uno.
Cat Paw carga un playbook por tarea, no mezcla varios. Empieza por este router; el resto son candidatos específicos del workflow.
- Router:
software-delivery-pack skills/software-delivery-pack/skill-definition-pressure-test/SKILL.md
Límites
Los límites viajan con el prompt.
- Verifica las herramientas, cuentas, permisos y el espacio de trabajo reales antes de empezar; nunca afirmes que exista una herramienta, cuenta, fuente o capacidad no disponible.
- Usa Latch/target-workspace para código privado, artefactos, sondeos en vivo o datos no públicos; si ese acceso no está disponible, detente en el límite e informa del bloqueo en lugar de sustituirlo por una suposición.
- Pausa para obtener aprobación explícita antes de acciones externas con consecuencias; devuelve evidencias, riesgos no resueltos, supuestos y cualquier acción que aún esté esperando aprobación.
Listo significa
Un cierre que se puede comprobar.
Un informe documentado de prueba de presión ejercita la skill con casos representativos y adversariales, registra fallos reproducibles y ofrece un veredicto de publicación defendible con evidencias y riesgos no resueltos.
Fuentes
De dónde sale este proceso.
- github.com/obra/superpowers/tree/5bf4e78011075bcfc0dc295f0724994cd123ee71/
- agentskills.io/specification
- platform.claude.com/docs/en/agents-and-tools/agent-skills/overview
Las fuentes fijan el patrón del workflow. Los posts de Reddit y de la comunidad, cuando aparecen, se tratan como anécdotas de quien lo practica, no como hechos universales.