SkillHone Synthesis
Zmienia eksplorację narzędzi w trudne, ocenialne maszynowo pytania/odpowiedzi benchmarkowe zamiast wyszukiwania ciekawostek.
Testowano · Działa
Co robi ten skill
Umiejętność metodologiczna do tworzenia zamkniętych, weryfikowalnych mechanicznie pytań benchmarkowych poprzez eksplorację środowiska narzędziowego w celu stworzenia grafu dowodów wielokrotnego użytku, następnie wydobywanie i walidowanie trudnych (wieloskokowych, z wykluczeniem/rankingiem, z różnych źródeł) par pytań/odpowiedzi z niego za pomocą potoku Cartographer/Miner/Validator/Deduper. Używaj podczas tworzenia zestawu ewaluacyjnego, pisania elementów ewaluacyjnych lub generowania zestawów danych z weryfikowalnymi odpowiedziami z wywoływalnych narzędzi; wyraźnie nie do pisania otwartego ani subiektywnej oceny.
Raport z testu
Zbudowano mały zestaw danych dla 6 pracowników i porównano naiwne pytanie ('what's E003's salary?', bezpośrednio czytelne) z pytaniem kierowanym przez umiejętność ('among Engineering hires before 2022, excluding contractors, who has the second-highest salary?') które wymusza prawdziwy łańcuch filtracji+wykluczenia+rankingu i zawiera wykonywalny fragment weryfikacyjny — różnica między ciekawostką a rzeczywistym elementem ewaluacyjnym była konkretna i odtwarzalna.
Testowano: 2026-07-14 · Claude Code 2.x (agent harness)
Instalacja
git clone https://github.com/Tencent/SkillHone cd SkillHone mkdir -p ~/.claude/skills cp -r skills/skillhone-synthesis ~/.claude/skills/skillhone-synthesis
Komendy i przykładowe prompty
/skillhone-synthesisZmienia eksplorację narzędzi w trudne, ocenialne maszynowo pytania/odpowiedzi benchmarkowe zamiast wyszukiwania ciekawostek.
Skille uruchamiają się na zwykłe polecenia — bez komend do zapamiętania. Po instalacji aktywują go prompty takie jak te (po angielsku):
Help me build a benchmark of verifiable Q&A pairs from this APIGenerate hard, closed-form eval questions from these tool callsI need eval data with exact-match gradable answers for our agent