Aaai Artifact Evaluation

Paketera AAAI kod/data-artefakter för granskare utan att bryta dubbelblinda regler

av brycewang-stanford · brycewang-stanford/Awesome-Journal-Skills

Fungerar med konfiguration ★ 8.0/10

Aaai Artifact Evaluation — Paketera AAAI kod/data-artefakter för granskare utan att bryta dubbelblinda regler

Vad den gör

En vägledningsfärdighet för att samla AAAI reproducerbarhetsartefakter: tekniska bilagor, kod/data ZIP-filer och utgåvor efter acceptans. Triggers vid paketering av AAAI kompletterande material, borttagning av anonymitetsläckor (git-historik, sökvägar, API-nycklar), eller planering av en reproduktionsväg vid granskningstid. Ger ut en strukturerad artefaktstatusrapport (status, inskickade filer, reproduktionsväg, anonymitetsrisker, saknade objekt).

Testrapport

Hämtade SKILL.md rå från repots träd; frontmatter parsas med namn+beskrivning och brödtexten är självförsörjande (inga skript eller filreferenser att bryta). Trigger-test: 3 paketerings/bilaga/efter-acceptans-fraser laddade den, 2 intilliggande AAAI-uppgifter (rebuttal-utkast, relaterat arbete) laddade den korrekt inte — 5/5. För utdata gav jag både en baslinje och en färdighetsföljd svar på "paketerar min AAAI-26 SAT-solver 25% hastighetsökning artefakt": baslinjens första råd var "lägg kod i ett offentligt GitHub-repo och länka det i papperet", vilket är exakt den muterbara de-anonymiserande pekaren som färdigheten flaggar som en fas-1 sammanfattnings-avvisningsrisk; färdighetsversionen förbjuder istället den URL:en, kräver borttagning av .git-historik/hem-sökvägar/API-nycklar, behandlar supplementet som oföränderligt, och emitterar den strukturerade statusblocket. Båda artefakterna skrevs till scratchpad.

Testad: 2026-07-21 · Claude Code 2.x (agent harness)

Installation

git clone --depth 1 https://github.com/brycewang-stanford/Awesome-Journal-Skills.git /tmp/aaai-artifact-evaluation-src
mkdir -p ~/.claude/skills
cp -R /tmp/aaai-artifact-evaluation-src/AAAI-Skills/skills/aaai-artifact-evaluation ~/.claude/skills/aaai-artifact-evaluation
# Pure advisory skill: single SKILL.md, no scripts or external deps.
# Part of a 12-skill AAAI plugin; the whole pack lives under AAAI-Skills/skills/.
# Plugin-marketplace alt: AAAI-Skills/.claude-plugin/marketplace.json exists in the repo.

Kommandon och exempelprompter

/aaai-artifact-evaluationPaketera AAAI kod/data-artefakter för granskare utan att bryta dubbelblinda regler

Skills triggas av vanliga förfrågningar — inga kommandon att memorera. Efter installationen aktiverar prompter som dessa skillen (på engelska):

Package the code appendix for AAAI submission
Prepare a reproducibility artifact release for AAAI
Check this supplement doesn't violate double-blind rules

Läs hela rapporten →