SkillHone Synthesis
Convierte la exploración de herramientas en preguntas/respuestas de benchmark difíciles y calificables por máquina, en lugar de búsquedas triviales.
Probado · Funciona
Qué hace
Una skill de metodología para construir preguntas de benchmark de forma cerrada y verificables mecánicamente, explorando un entorno de herramientas en un grafo de evidencia reutilizable, luego extrayendo y validando pares de preguntas/respuestas difíciles (multi-salto, exclusión/clasificación, interfuente) a través de un pipeline Cartographer/Miner/Validator/Deduper. Úsela al construir un conjunto de evaluación, escribir ítems de evaluación o generar conjuntos de datos de respuestas verificables a partir de herramientas invocables; explícitamente no para escritura abierta o puntuación subjetiva.
Informe de la prueba
Construí un conjunto de datos de juguete de 6 empleados y comparé una pregunta ingenua ('what's E003's salary?', directamente legible) con una guiada por la skill ('among Engineering hires before 2022, excluding contractors, who has the second-highest salary?') que fuerza una cadena real de filter+exclude+rank y se envía con un fragmento de verificación ejecutable — la diferencia entre trivia y un ítem de evaluación real fue concreta y reproducible.
Probado el: 2026-07-14 · Claude Code 2.x (agent harness)
Instalación
git clone https://github.com/Tencent/SkillHone cd SkillHone mkdir -p ~/.claude/skills cp -r skills/skillhone-synthesis ~/.claude/skills/skillhone-synthesis
Comandos y prompts de ejemplo
/skillhone-synthesisConvierte la exploración de herramientas en preguntas/respuestas de benchmark difíciles y calificables por máquina, en lugar de búsquedas triviales.
Los skills se activan con peticiones en lenguaje natural, sin comandos que memorizar. Tras instalarlo, prompts como estos lo activan (en inglés):
Help me build a benchmark of verifiable Q&A pairs from this APIGenerate hard, closed-form eval questions from these tool callsI need eval data with exact-match gradable answers for our agent