SkillProof tested Claude skills

NanoResearch Experiment Skeleton

Přemění JSON plán experimentu na spustitelný více-modulový ML tréninkový/evaluační/ablační skelet

od OpenRaiser · OpenRaiser/NanoResearch

Otestováno · Funguje ★ 8.8/10

NanoResearch Experiment Skeleton — Přemění JSON plán experimentu na spustitelný více-modulový ML tréninkový/evaluační/ablační skelet

Co umí

Čte papers/experiment_blueprint.json (datové sady, základní linie, metriky, ablační skupiny) a vytváří projekt experiments/ s daty, modely, tréninkem, vyhodnocením, YAML konfiguracemi pro každou ablaci a vstupním bodem run.py. Spouští se, když požádáte o vytvoření nebo generování kódu z plánu ML experimentu.

Testovací report

Předložen mu skutečný CIFAR-10 label-smoothing plán se čtyřhodnotovým eps sweep: dovednost vygenerovala 11 souborů napříč data/models/training/evaluation/configs plus jeden YAML pro každou hodnotu ablace, obě požadované metriky (přesnost a očekávaná kalibrační chyba), předčasné zastavení a checkpointing, všechny Python parsování a všechny YAML platné. Základní linie bez dovednosti zkolabovala sweep do jediného CLI flagu a zcela vynechala kalibrační metriku.

Testováno: 2026-07-24 · Claude Code 2.x (agent harness)

Instalace

git clone https://github.com/OpenRaiser/NanoResearch
mkdir -p ~/.claude/skills
cd NanoResearch && cp -r skills/nanoresearch-experiment ~/.claude/skills/nanoresearch-experiment

Příkazy a ukázkové prompty

  • /nanoresearch-experimentPřemění JSON plán experimentu na spustitelný více-modulový ML tréninkový/evaluační/ablační skelet

Skilly se spouštějí běžnými požadavky — žádné příkazy k zapamatování. Po instalaci ho aktivují prompty jako tyto (anglicky):

  • Scaffold an ML experiment project from this blueprint JSON
  • Generate training and eval code for my ablation groups
  • Build the experiments skeleton from experiment_blueprint.json

Kompletní testovací report (anglicky) →