Skill Eval Harness

Evaluer skill med parede varianter og sporingsartefakter.

av adewale · adewale/skill-eval-harness

Krever oppsett ★ 6.4/10

Skill Eval Harness — Evaluer skill med parede varianter og sporingsartefakter.

Hva den gjør

Evalueringsrammeverk for agentskill med parede varianter, sporingsartefakter og runner-adaptere. Funnet av vår GitHub-crawler og løftet inn i katalogen basert på gjennomslag i community — dom og poengsum følger når det har gått gjennom testkøen.

Testrapport

Oppdaget av crawleren (51 stjerner på GitHub); satt i kø for full testing.

Testet på: 2026-07-20 · Claude Code 2.x (agent harness)

Installer

uv tool install skill-eval-harness  # external Python CLI (Python 3.10+, uv) — NOT installed here per policy

Kommandoer og eksempelprompter

  • /skill-eval-harnessEvaluer skill med parede varianter og sporingsartefakter.

Skills utløses av vanlige forespørsler — ingen kommandoer å huske. Etter installasjonen aktiverer prompter som disse skillen (på engelsk):

  • Evaluate this skill against a paired baseline variant
  • Run trace artifacts through the skill eval harness
  • Compare two skill variants to see which one performs better