NanoResearch Experiment Skeleton

Gjør en eksperiment-blåkopi JSON om til et kjørbart multi-modul ML trenings-/evaluerings-/ablasjonsskjelett

av OpenRaiser · OpenRaiser/NanoResearch

Bestått ★ 8.8/10

NanoResearch Experiment Skeleton — Gjør en eksperiment-blåkopi JSON om til et kjørbart multi-modul ML trenings-/evaluerings-/ablasjonsskjelett

Hva den gjør

Leser en papers/experiment_blueprint.json (datasett, baselines, metrikker, ablasjonsgrupper) og stillaserer et experiments/-prosjekt med data, modeller, trening, evaluering, per-ablasjon YAML-konfigurasjoner, og et run.py inngangspunkt. Utløses når du ber om å stillasere eller generere kode fra en ML eksperiment-blåkopi eller plan.

Testrapport

Ga den en ekte CIFAR-10 label-smoothing blåkopi med en fire-verdi eps-sweep: ferdigheten produserte 11 filer på tvers av data/models/training/evaluation/configs pluss én YAML per ablasjonsverdi, begge de forespurte metrikkene (nøyaktighet og forventet kalibreringsfeil), tidlig stopp og sjekkpunkt, all Python-parsing og all YAML gyldig. Baseline uten ferdighet kollapset sweepen til et enkelt CLI-flagg og droppet kalibreringsmetrikken fullstendig.

Testet på: 2026-07-24 · Claude Code 2.x (agent harness)

Installer

git clone https://github.com/OpenRaiser/NanoResearch
mkdir -p ~/.claude/skills
cd NanoResearch && cp -r skills/nanoresearch-experiment ~/.claude/skills/nanoresearch-experiment

Kommandoer og eksempelprompter

  • /nanoresearch-experimentGjør en eksperiment-blåkopi JSON om til et kjørbart multi-modul ML trenings-/evaluerings-/ablasjonsskjelett

Skills utløses av vanlige forespørsler — ingen kommandoer å huske. Etter installasjonen aktiverer prompter som disse skillen (på engelsk):

  • Scaffold an ML experiment project from this blueprint JSON
  • Generate training and eval code for my ablation groups
  • Build the experiments skeleton from experiment_blueprint.json