Arize Dataset

CLI-gesteuertes CRUD, Versionierung und Export von Arize-Datasets für LLM-Evaluierungs-Sets.

Getestet · Funktioniert ★ 9.6/10

Was es kann

Wrappt das `ax` CLI zum Erstellen, Auflisten, Exportieren und Anhängen von Beispielen an Arize-Datasets für die LLM-Evaluierung, mit integrierten Schutzmechanismen gegen Tippfehler bei Schema-Inkonsistenzen und verkürzte (500-Zeilen) Exporte. Wird durch Dataset-CRUD-Sprache ausgelöst – create dataset, export dataset, append examples, golden dataset, test set – und delegiert explizit an die verwandten Skills arize-trace/arize-experiment für Tracing oder Evaluierungsläufe.

Testbericht

Erzeugte die exakte `ax datasets create --file -` / `ax datasets append --json` Syntax direkt aus der Doku (korrekter Plural des Sub-Befehls, positionales NAME_OR_ID, --space-Anforderung), wo eine uninformierte Schätzung plausibel klingende, aber falsche Flags verwendet hätte – ein echter, überprüfbarer Syntax-Gewinn, auch ohne einen Live-Arize-Account zur Ausführung.

Getestet am: 2026-07-14 · Claude Code 2.x (agent harness)

Installation

git clone https://github.com/github/awesome-copilot
cd awesome-copilot
mkdir -p ~/.claude/skills
cp -r skills/arize-dataset ~/.claude/skills/arize-dataset

Befehle & Beispiel-Prompts

/arize-datasetCLI-gesteuertes CRUD, Versionierung und Export von Arize-Datasets für LLM-Evaluierungs-Sets.

Skills reagieren auf normale Anfragen — keine Slash-Befehle nötig. Nach der Installation aktivieren Prompts wie diese den Skill (auf Englisch):

Create a new Arize dataset from these eval examples I collected
Export our golden dataset from Arize so I can review it locally
Append these new test cases to the existing evaluation dataset

Vollständiger Testbericht (Englisch) →