A/B Test Setup

Afgeschermde checklist die ongeldige A/B-tests blokkeert voordat code wordt geschreven

Door sickn33 · sickn33/agentic-awesome-skills

Getest · Werkt ★ 8.4/10

A/B Test Setup — Afgeschermde checklist die ongeldige A/B-tests blokkeert voordat code wordt geschreven

Wat het doet

Leidt een A/B-test door strenge poorten voor hypothese, metrics, steekproefgrootte en uitvoeringsgereedheid, en weigert verder te gaan wanneer een ontwerp ondermaats is of een metric ongedefinieerd is. Bevat een concrete tracking-verificatiechecklist (event firing, variant attribution, de-duplication, randomization audit) en no-peeking discipline. Activeert wanneer u een experiment wilt opzetten, ontwerpen of valideren.

Testrapport

Beide gevraagd om een signup-button kleurtest op te zetten: de baseline gaf los 'kies een metric en controleer significantie' advies, terwijl de skill een MDE en steekproefgrootte schatting afdwong (blootstellend dat een klein kleureffect veel verkeer nodig heeft) en een vijfstaps tracking-verificatiechecklist plus expliciete weigeringscondities uitvoerde die de baseline oversloeg. Het is een enkele zelfstandige SKILL.md zonder gebundelde scripts; de afsluitende generieke 'When to Use / Limitations' boilerplate voegt niets toe.

Getest op: 2026-07-18 · Claude Code 2.x (agent harness)

Installatie

git clone https://github.com/sickn33/agentic-awesome-skills.git
mkdir -p ~/.claude/skills
cd agentic-awesome-skills && cp -r skills/ab-test-setup ~/.claude/skills/ab-test-setup

Commando's en voorbeeldprompts

  • /ab-test-setupAfgeschermde checklist die ongeldige A/B-tests blokkeert voordat code wordt geschreven

Skills reageren op gewone verzoeken — geen commando's om te onthouden. Na installatie activeren prompts zoals deze de skill (in het Engels):

  • Help me set up an A/B test changing my signup button from blue to green.
  • I want to test two versions of my landing page, walk me through it.
  • Run an experiment on my checkout flow, make sure it's statistically valid.