SkillProof tested Claude skills

Optimize Skill

Eval-gated loop for å forbedre en skills SKILL.md uten regresjoner

av Bennyoooo · Bennyoooo/skillmaxxing

Tested · Didn't pass

Optimize Skill — Eval-gated loop for å forbedre en skills SKILL.md uten regresjoner

Hva den gjør

Kjører en evaluerings-score-reflekter-anvend-valider-promoterings-loop mot en eksisterende skills eval.yaml, begrenser redigeringer per trinn og blokkerer promotering med mindre en kandidat strengt tatt slår den nåværende versjonen uten regresjon på holdt-ute data. Utløses når en skill underpresterer eller brukeren ber om å optimalisere/justere/forbedre en skill som allerede har en eval satt.

Testrapport

Kopiering av bare skill-mappen (den eneste GitHub-only installasjonsstien som er tilgjengelig) etterlater scripts/optimize.sh uløst — verifisert med en ekte installasjon: `bash scripts/optimize.sh score ...` fra innsiden av den kopierte skill-mappen avsluttes med 127, 'No such file or directory', fordi selve scriptet ligger ett nivå oppe ved skill-maxing-plugin/scripts/, ikke inne i optimize-skill/.

Testet på: 2026-07-15 · Claude Code 2.x (agent harness)

Installer

git clone https://github.com/Bennyoooo/skillmaxxing
cd skillmaxxing
mkdir -p ~/.claude/skills
cp -r skill-maxing-plugin/skills/optimize-skill ~/.claude/skills/optimize-skill

Kommandoer og eksempelprompter

  • /optimize-skillEval-gated loop for å forbedre en skills SKILL.md uten regresjoner

Skills utløses av vanlige forespørsler — ingen kommandoer å huske. Etter installasjonen aktiverer prompter som disse skillen (på engelsk):

  • My PR-review skill has an eval.yaml but keeps failing one test case
  • Optimize this skill's prompt against its eval set without breaking passing cases
  • This skill scores badly on its evals, improve it without regressing the rest

Full rapport →