Skill Eval Harness

Bewertet Skills mit gepaarten Varianten und Trace-Artefakten.

von adewale · adewale/skill-eval-harness

Funktioniert mit Setup ★ 6.4/10

Skill Eval Harness — Bewertet Skills mit gepaarten Varianten und Trace-Artefakten.

Was es kann

Evaluierungs-Gerüst für Agent-Skills mit gepaarten Varianten, Trace-Artefakten und Runner-Adaptern. Von unserem GitHub-Crawler entdeckt und aufgrund von Community-Zugkraft in den Katalog aufgenommen — Urteil und Score folgen, sobald er die Testwarteschlange durchlaufen hat.

Testbericht

Vom Crawler entdeckt (51★ auf GitHub); für einen vollständigen Test vorgemerkt.

Getestet am: 2026-07-20 · Claude Code 2.x (agent harness)

Installation

uv tool install skill-eval-harness  # external Python CLI (Python 3.10+, uv) — NOT installed here per policy

Befehle & Beispiel-Prompts

/skill-eval-harnessBewertet Skills mit gepaarten Varianten und Trace-Artefakten.

Skills reagieren auf normale Anfragen — keine Slash-Befehle nötig. Nach der Installation aktivieren Prompts wie diese den Skill (auf Englisch):

Evaluate this skill against a paired baseline variant
Run trace artifacts through the skill eval harness
Compare two skill variants to see which one performs better

Vollständiger Testbericht (Englisch) →