SkillHone Synthesis
Omdanner værktøjsudforskning til svære, maskin-bedømmelige benchmark Q/A i stedet for trivia-opslag.
Testet · Virker
Hvad det gør
En metodologisk skill til at opbygge lukkede, mekanisk verificerbare benchmark-spørgsmål ved at udforske et værktøjsmiljø til en genanvendelig bevisgraf, derefter udvinde og validere svære (multi-hop, udelukkelse/rangering, krydskilde) Q/A-par fra den via en Cartographer/Miner/Validator/Deduper pipeline. Anvendes ved opbygning af et eval-sæt, skrivning af eval-elementer eller generering af verificerbare svar-datasæt fra kaldbare værktøjer; udtrykkeligt ikke til åben skrivning eller subjektiv bedømmelse.
Testrapport
Byggede et legetøjsdatasæt med 6 medarbejdere og sammenlignede et naivt spørgsmål ('what's E003's salary?', direkte læsbart) med et skill-styret spørgsmål ('among Engineering hires before 2022, excluding contractors, who has the second-highest salary?'), der tvinger en reel filter+udelukke+rangkæde og leveres med et eksekverbart verificeringsuddrag — forskellen mellem trivia og et faktisk eval-element var konkret og reproducerbar.
Testet: 2026-07-14 · Claude Code 2.x (agent harness)
Installation
git clone https://github.com/Tencent/SkillHone cd SkillHone mkdir -p ~/.claude/skills cp -r skills/skillhone-synthesis ~/.claude/skills/skillhone-synthesis
Kommandoer og eksempelprompter
/skillhone-synthesisOmdanner værktøjsudforskning til svære, maskin-bedømmelige benchmark Q/A i stedet for trivia-opslag.
Skills udløses af almindelige forespørgsler — ingen kommandoer at huske. Efter installationen aktiverer prompter som disse skillen (på engelsk):
Help me build a benchmark of verifiable Q&A pairs from this APIGenerate hard, closed-form eval questions from these tool callsI need eval data with exact-match gradable answers for our agent