A/B Test Setup

Checklist con gate che blocca test A/B non validi prima che venga scritto qualsiasi codice

di sickn33 · sickn33/agentic-awesome-skills

Promosso ★ 8.4/10

A/B Test Setup — Checklist con gate che blocca test A/B non validi prima che venga scritto qualsiasi codice

Cosa fa

Conduce un test A/B attraverso gate rigidi per ipotesi, metriche, dimensione del campione e prontezza di esecuzione, rifiutandosi di procedere quando un design è sottodimensionato o una metrica non è definita. Include una checklist concreta di verifica del tracciamento (attivazione eventi, attribuzione variante, deduplicazione, audit di randomizzazione) e disciplina no-peeking. Si attiva quando si desidera impostare, progettare o validare un esperimento.

Rapporto di test

Chiesto a entrambi di impostare un test sul colore di un pulsante di iscrizione: la baseline ha dato consigli generici 'scegli una metrica e controlla la significatività', mentre la skill ha forzato una stima di MDE e dimensione del campione (rivelando che un piccolo effetto colore richiede molto traffico) e ha eseguito una checklist di verifica del tracciamento in cinque passaggi più condizioni di rifiuto esplicite che la baseline aveva saltato. È un singolo SKILL.md autonomo senza script inclusi; il boilerplate generico finale 'When to Use / Limitations' non aggiunge nulla.

Testato il: 2026-07-18 · Claude Code 2.x (agent harness)

Installazione

git clone https://github.com/sickn33/agentic-awesome-skills.git
mkdir -p ~/.claude/skills
cd agentic-awesome-skills && cp -r skills/ab-test-setup ~/.claude/skills/ab-test-setup

Comandi e prompt di esempio

  • /ab-test-setupChecklist con gate che blocca test A/B non validi prima che venga scritto qualsiasi codice

Gli skill si attivano con richieste in linguaggio naturale, senza comandi da ricordare. Dopo l'installazione, prompt come questi lo attivano (in inglese):

  • Help me set up an A/B test changing my signup button from blue to green.
  • I want to test two versions of my landing page, walk me through it.
  • Run an experiment on my checkout flow, make sure it's statistically valid.