Analyzing Experiment Session Replays

Cosa fa

Recupera le registrazioni di sessione per variante di esperimento utilizzando le query HogQL di PostHog e lo strumento query-session-recordings-list, quindi confronta le metriche di attività quantitative (durata, clic, errori della console) e i pattern di comportamento qualitativi tra gruppi di controllo e di test. Si attiva quando un utente desidera vedere come gli utenti si comportano in modo diverso tra le varianti dell'esperimento, identificare problemi di usabilità dai replay o ottenere un colore qualitativo per completare i risultati quantitativi dei test A/B. Documenta un 'footgun' specifico di PostHog: il filtro di registrazione type:flag viene silenziosamente ignorato dall'API, quindi lo scoping delle varianti deve passare attraverso la proprietà dell'evento $feature/<flag_key>.

Installazione

git clone https://github.com/PostHog/ai-plugin
cd ai-plugin
mkdir -p ~/.claude/skills
cp -r skills/analyzing-experiment-session-replays ~/.claude/skills/analyzing-experiment-session-replays

Comandi e prompt di esempio

• /analyzing-experiment-session-replaysConfronta i replay di sessione di PostHog tra varianti di esperimenti A/B per insight qualitativi.

Gli skill si attivano con richieste in linguaggio naturale, senza comandi da ricordare. Dopo l'installazione, prompt come questi lo attivano (in inglese):

• Compare session recordings between our control and test experiment groups
• Pull PostHog replays for each variant and tell me how users behaved differently
• I need qualitative insight from replays to explain our A/B test results