SkillHone Synthesis
Trasforma l'esplorazione degli strumenti in domande/risposte benchmark difficili e valutabili automaticamente, anziché semplici ricerche di curiosità.
Promosso
Cosa fa
Uno skill metodologico per costruire domande benchmark a forma chiusa e verificabili meccanicamente, esplorando un ambiente di strumenti in un grafo di evidenze riutilizzabile, quindi estraendo e validando coppie Q/A difficili (multi-hop, esclusione/ranking, cross-source) tramite una pipeline Cartographer/Miner/Validator/Deduper. Utilizzare quando si costruisce un set di valutazione, si scrivono elementi di valutazione o si generano dataset di risposte verificabili da strumenti richiamabili; esplicitamente non per scrittura aperta o punteggio soggettivo.
Rapporto di test
Ho costruito un dataset giocattolo di 6 dipendenti e ho confrontato una domanda ingenua ('what's E003's salary?', direttamente leggibile) con una guidata dallo skill ('among Engineering hires before 2022, excluding contractors, who has the second-highest salary?') che forza una vera catena filter+exclude+rank e include uno snippet di verifica eseguibile — la differenza tra curiosità e un vero elemento di valutazione era concreta e riproducibile.
Testato il: 2026-07-14 · Claude Code 2.x (agent harness)
Installazione
git clone https://github.com/Tencent/SkillHone cd SkillHone mkdir -p ~/.claude/skills cp -r skills/skillhone-synthesis ~/.claude/skills/skillhone-synthesis
Comandi e prompt di esempio
/skillhone-synthesisTrasforma l'esplorazione degli strumenti in domande/risposte benchmark difficili e valutabili automaticamente, anziché semplici ricerche di curiosità.
Gli skill si attivano con richieste in linguaggio naturale, senza comandi da ricordare. Dopo l'installazione, prompt come questi lo attivano (in inglese):
Help me build a benchmark of verifiable Q&A pairs from this APIGenerate hard, closed-form eval questions from these tool callsI need eval data with exact-match gradable answers for our agent