SkillHone Synthesis
Förvandlar verktygsutforskning till svåra, maskinbedömbara benchmark Q/A istället för trivia-uppslagningar.
Testad · Fungerar
Vad den gör
En metodik-skill för att bygga slutna, mekaniskt verifierbara benchmark-frågor genom att utforska en verktygsmiljö till en återanvändbar bevisgraf, sedan utvinna och validera svåra (multi-hop, exkludering/rankning, kors-källa) Q/A-par från den via en Cartographer/Miner/Validator/Deduper-pipeline. Används vid byggande av en eval-uppsättning, skrivande av eval-objekt eller generering av verifierbara svarsdatauppsättningar från anropbara verktyg; uttryckligen inte för öppen skrivning eller subjektiv bedömning.
Testrapport
Byggde en leksaksdatauppsättning med 6 anställda och jämförde en naiv fråga ('what's E003's salary?', direkt läsbar) med en skill-styrd ('among Engineering hires before 2022, excluding contractors, who has the second-highest salary?') som tvingar fram en verklig filter+exclude+rank-kedja och levereras med ett körbart verifieringsutdrag — skillnaden mellan trivia och ett faktiskt eval-objekt var konkret och reproducerbar.
Testad: 2026-07-14 · Claude Code 2.x (agent harness)
Installation
git clone https://github.com/Tencent/SkillHone cd SkillHone mkdir -p ~/.claude/skills cp -r skills/skillhone-synthesis ~/.claude/skills/skillhone-synthesis
Kommandon och exempelprompter
/skillhone-synthesisFörvandlar verktygsutforskning till svåra, maskinbedömbara benchmark Q/A istället för trivia-uppslagningar.
Skills triggas av vanliga förfrågningar — inga kommandon att memorera. Efter installationen aktiverar prompter som dessa skillen (på engelska):
Help me build a benchmark of verifiable Q&A pairs from this APIGenerate hard, closed-form eval questions from these tool callsI need eval data with exact-match gradable answers for our agent