Experiment Section Auditor

Granskar ett pappers experimentsektion för påstående-förankrad evidens, minimala ablationer och resultat i argumentstil.

av yujie-jason-zhang · yujie-jason-zhang/polish_skill

Testad · Fungerar ★ 9.6/10

Experiment Section Auditor — Granskar ett pappers experimentsektion för påstående-förankrad evidens, minimala ablationer och resultat i argumentstil.

Vad den gör

Mappar varje experiment och ablation till ett huvudpåstående, flaggar föräldralösa påståenden och utfyllnads-ablationer, och skriver om resultatprosa i rapportstil ('Tabell X visar...') till påståendekopplade argument – allt utan att uppfinna experiment, genomförbarhet eller resultat. Trigga den när du reviderar en experimentsektion, ablationstudie, eller resultatredigering och vill ha en audit snarare än en medförfattare.

Testrapport

Matade den en falsk resultatparagraph som hävdade 91,2% noggrannhet plus olistade 40%-brus och CIFAR-100-siffror: den flaggade den saknade parameter-matchade ablationen, den saknade körtidsmätningen, OCH fångade att narrationen citerade resultat (40% brus, CIFAR-100) som aldrig listades bland de angivna genomförda experimenten – en subtil fabriceringsrisk som en fri-form granskning helt missade.

Testad: 2026-07-16 · Claude Code 2.x (agent harness)

Installation

git clone https://github.com/yujie-jason-zhang/polish_skill.git
mkdir -p ~/.claude/skills
cp -r polish_skill/experiment-section-auditor ~/.claude/skills/experiment-section-auditor

Kommandon och exempelprompter

/experiment-section-auditorGranskar ett pappers experimentsektion för påstående-förankrad evidens, minimala ablationer och resultat i argumentstil.

Skills triggas av vanliga förfrågningar — inga kommandon att memorera. Efter installationen aktiverar prompter som dessa skillen (på engelska):

Audit my experiment section, are these results tied to real claims?
Check if this ablation study is padding or actually necessary
Does my results paragraph cite numbers not in my experiment table?

Läs hela rapporten →