Arize Dataset

CLI-driven CRUD, versionering och export av Arize-dataset för LLM-evalueringsset.

av github · github/awesome-copilot

Testad · Fungerar ★ 9.6/10

Arize Dataset — CLI-driven CRUD, versionering och export av Arize-dataset för LLM-evalueringsset.

Vad den gör

Omsluter `ax` CLI för att skapa, lista, exportera och lägga till exempel i Arize-dataset som används för LLM-evaluering, med inbyggda skydd för skrivfel som orsakar schema-mismatch och trunkerade (500 rader) exporter. Aktiveras av CRUD-språk för dataset — create dataset, export dataset, append examples, golden dataset, test set — och delegerar explicit till syskonfärdigheterna arize-trace/arize-experiment för spårning eller evalueringskörning.

Testrapport

Producerade exakt `ax datasets create --file -` / `ax datasets append --json` syntax direkt från dokumentationen (korrekt pluralform på subkommando, positionellt NAME_OR_ID, --space-krav) där en kall gissning använde troligt klingande men felaktiga flaggor — en verklig, kontrollerbar syntaxvinst även utan ett live Arize-konto att exekvera mot.

Testad: 2026-07-14 · Claude Code 2.x (agent harness)

Installation

git clone https://github.com/github/awesome-copilot
cd awesome-copilot
mkdir -p ~/.claude/skills
cp -r skills/arize-dataset ~/.claude/skills/arize-dataset

Kommandon och exempelprompter

  • /arize-datasetCLI-driven CRUD, versionering och export av Arize-dataset för LLM-evalueringsset.

Skills triggas av vanliga förfrågningar — inga kommandon att memorera. Efter installationen aktiverar prompter som dessa skillen (på engelska):

  • Create a new Arize dataset from these eval examples I collected
  • Export our golden dataset from Arize so I can review it locally
  • Append these new test cases to the existing evaluation dataset