2.4 Kontrolní seznam kritérií úspěchu
Kontrolní seznam kritérií úspěchu
Měřte to, co je důležité pro kvalitu skillu
Dobře navržený Skill by měl splňovat tato kritéria, aby byl považován za produkčně připravený.
Klíčová kritéria kvality
Měřitelné metriky
Kvantitativní metriky
Skill se spustí u 90 % relevantních dotazů (testujte s 10-20 variacemi). Dokončí workflow v X voláních nástrojů. 0 neúspěšných API volání na workflow.
Kvalitativní metriky
Uživatelé nemusí Claudovi říkat další kroky. Workflow se dokončí bez uživatelské korekce. Konzistentní výsledky napříč sezeními.
Testovací kontrolní seznam
Brána kvality
Nevydávejte Skill, dokud neprojde 5 po sobě jdoucích úspěšných běhů s různými vstupy. Tato minimální laťka zajišťuje základní spolehlivost.
Shrnutí sekce
Dobré plánování předchází špatným Skills. Čas investovaný do plánování se exponenciálně vyplatí při provádění. Definujte jasná kritéria úspěchu, než začnete stavět.
Jak poznat, že je Skill připraven — kvantitativní a kvalitativní metriky.
Momentálně nejsou žádné komentáře.