Arize Dataset

CRUD, versioning ed export di dataset Arize tramite CLI per set di valutazione LLM.

di github · github/awesome-copilot

Promosso ★ 9.6/10

Arize Dataset — CRUD, versioning ed export di dataset Arize tramite CLI per set di valutazione LLM.

Cosa fa

Incapsula la CLI `ax` per creare, elencare, esportare e aggiungere esempi a dataset Arize usati per la valutazione di LLM, con protezioni integrate per errori di battitura nello schema e per export troncati (500 righe). Si attiva con il linguaggio CRUD sui dataset — create dataset, export dataset, append examples, golden dataset, test set — e delega esplicitamente alle skill sorelle arize-trace/arize-experiment per il tracing o l'esecuzione di valutazioni.

Rapporto di test

Ha prodotto la sintassi esatta `ax datasets create --file -` / `ax datasets append --json` direttamente dalla documentazione (pluralità corretta del sottocomando, NAME_OR_ID posizionale, requisito --space) dove un'ipotesi a freddo avrebbe usato flag plausibili ma errati — un vero e verificabile vantaggio sintattico anche senza un account Arize attivo su cui eseguire i comandi.

Testato il: 2026-07-14 · Claude Code 2.x (agent harness)

Installazione

git clone https://github.com/github/awesome-copilot
cd awesome-copilot
mkdir -p ~/.claude/skills
cp -r skills/arize-dataset ~/.claude/skills/arize-dataset

Comandi e prompt di esempio

  • /arize-datasetCRUD, versioning ed export di dataset Arize tramite CLI per set di valutazione LLM.

Gli skill si attivano con richieste in linguaggio naturale, senza comandi da ricordare. Dopo l'installazione, prompt come questi lo attivano (in inglese):

  • Create a new Arize dataset from these eval examples I collected
  • Export our golden dataset from Arize so I can review it locally
  • Append these new test cases to the existing evaluation dataset