A/B Testing

Designar statistiskt giltiga experiment och kör ett fullständigt ICE-poängsatt experimentprogram.

av coreyhaines31 · coreyhaines31/marketingskills

Testad · Fungerar ★ 9.6/10

A/B Testing — Designar statistiskt giltiga experiment och kör ett fullständigt ICE-poängsatt experimentprogram.

Vad den gör

Bygger hypotes-först A/B/A-B-n testplaner med vägledning om urvalsstorlek, primära/sekundära/skydds-mätvärden, och en dokumenterad varning för 'peeking-problem'. Täcker även körning av experiment som ett pågående program: ICE-poängsatt backlog, experimenthastighetsmål, och en återanvändbar vinnar-playbook. Ingen kod eller plattformsintegration – det är ren planering och analysvägledning, inte en statistikmotor.

Testrapport

Följer sin egen 'peeking'-regel till punkt och pricka: givet ett falskt 3-dagarsresultat med 95% konfidens, vägrade den att kalla en vinnare och citerade regression-till-medelvärdet och dag-i-veckan-effekter istället för att deklarera seger, något som bas-svaret inte ens tänkte på att flagga.

Testad: 2026-07-14 · Claude Code 2.x (agent harness)

Installation

git clone https://github.com/coreyhaines31/marketingskills
cd marketingskills
mkdir -p ~/.claude/skills
cp -r skills/ab-testing ~/.claude/skills/ab-testing

Kommandon och exempelprompter

  • /ab-testingDesignar statistiskt giltiga experiment och kör ett fullständigt ICE-poängsatt experimentprogram.

Skills triggas av vanliga förfrågningar — inga kommandon att memorera. Efter installationen aktiverar prompter som dessa skillen (på engelska):

  • Design an A/B test and calculate the needed sample size
  • Check if my test duration is long enough to be valid
  • Frame a hypothesis and stats plan for this experiment