Arize Dataset

CLI-drevet Arize-datasett CRUD, versjonering og eksport for LLM-evalueringssett.

av github · github/awesome-copilot

Bestått ★ 9.6/10

Arize Dataset — CLI-drevet Arize-datasett CRUD, versjonering og eksport for LLM-evalueringssett.

Hva den gjør

Wrapper `ax` CLI-et for å opprette, liste, eksportere og legge til eksempler i Arize-datasett brukt til LLM-evaluering, med innebygde sikkerhetstiltak mot skrivefeil i skjema-mismatch og avkortede (500-raders) eksporter. Utløses av datasett-CRUD-språk — create dataset, export dataset, append examples, golden dataset, test set — og delegerer eksplisitt til søskenferdighetene arize-trace/arize-experiment for sporing eller evalueringskjøring.

Testrapport

Produserte nøyaktig `ax datasets create --file -` / `ax datasets append --json` syntaks rett fra dokumentasjonen (korrekt subkommando-flertall, posisjonell NAME_OR_ID, --space-krav) der en ren gjetning brukte sannsynlig-lydende, men feil flagg — en reell, kontrollerbar syntaks-seier selv uten en aktiv Arize-konto å kjøre mot.

Testet på: 2026-07-14 · Claude Code 2.x (agent harness)

Installer

git clone https://github.com/github/awesome-copilot
cd awesome-copilot
mkdir -p ~/.claude/skills
cp -r skills/arize-dataset ~/.claude/skills/arize-dataset

Kommandoer og eksempelprompter

  • /arize-datasetCLI-drevet Arize-datasett CRUD, versjonering og eksport for LLM-evalueringssett.

Skills utløses av vanlige forespørsler — ingen kommandoer å huske. Etter installasjonen aktiverer prompter som disse skillen (på engelsk):

  • Create a new Arize dataset from these eval examples I collected
  • Export our golden dataset from Arize so I can review it locally
  • Append these new test cases to the existing evaluation dataset