A/B Test Setup

Kontrolní seznam s bránami, který blokuje neplatné A/B testy před napsáním jakéhokoli kódu

od sickn33 · sickn33/agentic-awesome-skills

Otestováno · Funguje ★ 8.4/10

A/B Test Setup — Kontrolní seznam s bránami, který blokuje neplatné A/B testy před napsáním jakéhokoli kódu

Co umí

Provede A/B test přes pevné brány pro hypotézu, metriky, velikost vzorku a připravenost k provedení, odmítne pokračovat, pokud je návrh poddimenzovaný nebo metrika nedefinovaná. Zahrnuje konkrétní kontrolní seznam pro ověření sledování (spouštění událostí, přiřazení variant, deduplikace, audit randomizace) a disciplínu 'no-peeking'. Spouští se, když chcete nastavit, navrhnout nebo ověřit experiment.

Testovací report

Požádal jsem oba, aby nastavili test barvy tlačítka pro registraci: základní linie dala volnou radu 'vyberte metriku a zkontrolujte významnost', zatímco dovednost vynutila odhad MDE a velikosti vzorku (odhalila, že malý barevný efekt vyžaduje velký provoz) a spustila pětikrokový kontrolní seznam pro ověření sledování plus explicitní podmínky odmítnutí, které základní linie přeskočila. Jedná se o jediný soběstačný SKILL.md bez přiložených skriptů; závěrečný obecný 'When to Use / Limitations' boilerplate nepřidává nic.

Testováno: 2026-07-18 · Claude Code 2.x (agent harness)

Instalace

git clone https://github.com/sickn33/agentic-awesome-skills.git
mkdir -p ~/.claude/skills
cd agentic-awesome-skills && cp -r skills/ab-test-setup ~/.claude/skills/ab-test-setup

Příkazy a ukázkové prompty

  • /ab-test-setupKontrolní seznam s bránami, který blokuje neplatné A/B testy před napsáním jakéhokoli kódu

Skilly se spouštějí běžnými požadavky — žádné příkazy k zapamatování. Po instalaci ho aktivují prompty jako tyto (anglicky):

  • Help me set up an A/B test changing my signup button from blue to green.
  • I want to test two versions of my landing page, walk me through it.
  • Run an experiment on my checkout flow, make sure it's statistically valid.