Analyzing Experiment Session Replays

Co robi ten skill

Pobiera nagrania sesji dla każdego wariantu eksperymentu za pomocą zapytań HogQL PostHog i narzędzia query-session-recordings-list, a następnie porównuje ilościowe metryki aktywności (czas trwania, kliknięcia, błędy konsoli) i jakościowe wzorce zachowań między grupami kontrolnymi a testowymi. Uruchamia się, gdy użytkownik chce zobaczyć, jak użytkownicy zachowują się inaczej w różnych wariantach eksperymentu, zidentyfikować problemy z użytecznością na podstawie powtórek lub uzyskać jakościowy kontekst uzupełniający ilościowe wyniki testów A/B. Dokumentuje specyficzną pułapkę PostHog: filtr nagrywania type:flag jest cicho ignorowany przez API, więc zakres wariantów musi przechodzić przez właściwość zdarzenia $feature/<flag_key>.

Instalacja

git clone https://github.com/PostHog/ai-plugin
cd ai-plugin
mkdir -p ~/.claude/skills
cp -r skills/analyzing-experiment-session-replays ~/.claude/skills/analyzing-experiment-session-replays

Komendy i przykładowe prompty

• /analyzing-experiment-session-replaysPorównuje powtórki sesji PostHog w wariantach eksperymentów A/B w celu uzyskania jakościowych spostrzeżeń.

Skille uruchamiają się na zwykłe polecenia — bez komend do zapamiętania. Po instalacji aktywują go prompty takie jak te (po angielsku):

• Compare session recordings between our control and test experiment groups
• Pull PostHog replays for each variant and tell me how users behaved differently
• I need qualitative insight from replays to explain our A/B test results