Aaai Artifact Evaluation
AAAI Code-/Daten-Artefakte für Reviewer verpacken, ohne Double-Blind-Regeln zu verletzen
Funktioniert mit Setup
Was es kann
Ein Leitfaden-Skill zum Zusammenstellen von AAAI-Reproduzierbarkeitsartefakten: technische Anhänge, Code-/Daten-ZIPs und Post-Acceptance-Releases. Wird ausgelöst beim Verpacken von AAAI-Zusatzmaterial, Entfernen von Anonymitätslecks (git history, Pfade, API-Schlüssel) oder Planen eines Reproduktionspfads zur Überprüfungszeit. Gibt einen strukturierten Artefakt-Statusbericht aus (Status, eingereichte Dateien, Reproduktionspfad, Anonymitätsrisiken, fehlende Elemente).
Testbericht
SKILL.md roh aus dem Repo-Baum abgerufen; Frontmatter wird mit Name+Beschreibung geparst und der Body ist eigenständig (keine Skripte oder Dateiverweise, die kaputt gehen könnten). Trigger-Test: 3 Verpackungs-/Anhang-/Post-Acceptance-Formulierungen luden es, 2 angrenzende AAAI-Aufgaben (Widerlegung entwerfen, verwandte Arbeiten) taten dies korrekt nicht – 5/5. Für die Ausgabe gab ich sowohl eine Baseline- als auch eine Skill-konforme Antwort auf "package my AAAI-26 SAT-solver 25% speedup artifact": Der erste Ratschlag der Baseline war "put code in a public GitHub repo and link it in the paper", was genau der veränderliche deanonymisierende Zeiger ist, den der Skill als Phase-1-Zusammenfassungs-Ablehnungsrisiko kennzeichnet; die Skill-Version verbietet stattdessen diese URL, erfordert das Entfernen von .git history/home paths/API keys, behandelt den Anhang als unveränderlich und gibt den strukturierten Statusblock aus. Beide Artefakte wurden in den Scratchpad geschrieben.
Getestet am: 2026-07-21 · Claude Code 2.x (agent harness)
Installation
git clone --depth 1 https://github.com/brycewang-stanford/Awesome-Journal-Skills.git /tmp/aaai-artifact-evaluation-src mkdir -p ~/.claude/skills cp -R /tmp/aaai-artifact-evaluation-src/AAAI-Skills/skills/aaai-artifact-evaluation ~/.claude/skills/aaai-artifact-evaluation # Pure advisory skill: single SKILL.md, no scripts or external deps. # Part of a 12-skill AAAI plugin; the whole pack lives under AAAI-Skills/skills/. # Plugin-marketplace alt: AAAI-Skills/.claude-plugin/marketplace.json exists in the repo.
Befehle & Beispiel-Prompts
/aaai-artifact-evaluationAAAI Code-/Daten-Artefakte für Reviewer verpacken, ohne Double-Blind-Regeln zu verletzen
Skills reagieren auf normale Anfragen — keine Slash-Befehle nötig. Nach der Installation aktivieren Prompts wie diese den Skill (auf Englisch):
Package the code appendix for AAAI submissionPrepare a reproducibility artifact release for AAAICheck this supplement doesn't violate double-blind rules