Arize Dataset

CRUD, versionnement et exportation de jeux de données Arize via CLI pour les ensembles d'évaluation de LLM.

Testé · Fonctionne ★ 9.6/10

Ce que fait

Enrobe le CLI `ax` pour créer, lister, exporter et ajouter des exemples aux jeux de données Arize utilisés pour l'évaluation de LLM, avec des protections intégrées contre les fautes de frappe dans les schémas et les exportations tronquées (500 lignes). Se déclenche sur le langage CRUD de jeux de données — create dataset, export dataset, append examples, golden dataset, test set — et délègue explicitement aux compétences sœurs arize-trace/arize-experiment pour le traçage ou l'exécution d'évaluations.

Rapport de test

A produit la syntaxe exacte `ax datasets create --file -` / `ax datasets append --json` directement depuis la documentation (pluralité correcte de la sous-commande, NAME_OR_ID positionnel, exigence de --space) là où une estimation à froid utilisait des flags plausibles mais incorrects — un gain de syntaxe réel et vérifiable même sans compte Arize actif pour l'exécution.

Testé le: 2026-07-14 · Claude Code 2.x (agent harness)

Installation

git clone https://github.com/github/awesome-copilot
cd awesome-copilot
mkdir -p ~/.claude/skills
cp -r skills/arize-dataset ~/.claude/skills/arize-dataset

Commandes et exemples de prompts

/arize-datasetCRUD, versionnement et exportation de jeux de données Arize via CLI pour les ensembles d'évaluation de LLM.

Les skills se déclenchent sur des demandes en langage courant — aucune commande à retenir. Après installation, des prompts comme ceux-ci l'activent (en anglais) :

Create a new Arize dataset from these eval examples I collected
Export our golden dataset from Arize so I can review it locally
Append these new test cases to the existing evaluation dataset

Rapport complet →