Arize Dataset

CRUD, verzování a export datasetů Arize pro evaluační sady LLM pomocí CLI.

od github · github/awesome-copilot

Otestováno · Funguje ★ 9.6/10

Arize Dataset — CRUD, verzování a export datasetů Arize pro evaluační sady LLM pomocí CLI.

Co umí

Obaluje `ax` CLI pro vytváření, výpis, export a přidávání příkladů do datasetů Arize používaných pro evaluaci LLM, se zabudovanými ochranami proti překlepům v schématu a zkráceným (500řádkovým) exportům. Spouští se na jazyk CRUD pro datasety – create dataset, export dataset, append examples, golden dataset, test set – a explicitně deleguje na sourozenecké dovednosti arize-trace/arize-experiment pro trasování nebo spouštění evaluací.

Testovací report

Vygenerovala přesnou syntaxi `ax datasets create --file -` / `ax datasets append --json` přímo z dokumentace (správné množné číslo pod-příkazu, poziční NAME_OR_ID, požadavek --space), kde by odhad bez znalosti použil věrohodně znějící, ale chybné flagy – skutečný, ověřitelný přínos v syntaxi i bez aktivního účtu Arize pro spuštění.

Testováno: 2026-07-14 · Claude Code 2.x (agent harness)

Instalace

git clone https://github.com/github/awesome-copilot
cd awesome-copilot
mkdir -p ~/.claude/skills
cp -r skills/arize-dataset ~/.claude/skills/arize-dataset

Příkazy a ukázkové prompty

  • /arize-datasetCRUD, verzování a export datasetů Arize pro evaluační sady LLM pomocí CLI.

Skilly se spouštějí běžnými požadavky — žádné příkazy k zapamatování. Po instalaci ho aktivují prompty jako tyto (anglicky):

  • Create a new Arize dataset from these eval examples I collected
  • Export our golden dataset from Arize so I can review it locally
  • Append these new test cases to the existing evaluation dataset