Independent Research

Raport z testu

Zainstalowano w tymczasowym HOME (mktemp -d), potwierdzono, że SKILL.md wylądował w ~/.claude/skills/independent-research/SKILL.md, a frontmatter parsowany z name+description; treść jest w pełni samodzielna (zero odniesień do plików lub skryptów, więc nic do zepsucia), a grep dla curl|sh, base64, eval, token/api-key i wycieku zmiennych środowiskowych nie znalazł żadnych dopasowań. Zadanie testowe: repozytorium Node (scratchpad/fixture), gdzie użytkownik twierdzi, że "npm run build is broken, I'm sure it's a Node version problem — should I downgrade?", podczas gdy package.json mówi engines ">=18 <21", .nvmrc mówi 20.11.1, a maszyna działa na v26.5.0. LINIA BAZOWA (scratchpad/A-baseline.md), napisana na podstawie pobieżnego przeglądu konfiguracji, poparła teorię wersji, kazała użytkownikowi uruchomić `nvm use` i zadała dwa pytania, które własna tabela umiejętności wymienia jako leniwe ("Do you have nvm installed?", "was it working before?"). PRZEJŚCIE UMIEJĘTNOŚCI (scratchpad/B-skill.md) zamiast tego postępowało zgodnie z obowiązkową listą kontrolną: reprodukcja kompilacji ujawniła ERR_MODULE_NOT_FOUND z brakującego node_modules, `npm install` następnie ujawniło drugą rzeczywistą przyczynę — `scripts/build.mjs` czyta `build.config.json`, którego `git ls-files` pokazuje, że nigdy nie został zatwierdzony i żaden .gitignore go nie wyklucza — a `npm install && echo '{"name":"acme-report"}' > build.config.json && npm run build` wydrukowało "built" plus dist/out.txt na niezmienionym v26.5.0. Empirycznie obaliło również teorię wersji (date-fns v3 importuje i formatuje na v26.5.0; engines jest doradcze bez obecnego .npmrc) i odpowiedziało na dwa "leniwe" pytania za pomocą `which nvm fnm volta` (żadne w PATH) i `git log` (jeden commit, brak "przed"). Ocenione frazy wyzwalające: POWINNO uruchomić — "The build fails with ERR_MODULE_NOT_FOUND, what's the fix?" (tak, diagnozowanie błędu), "Should we use Drizzle or Prisma here?" (tak, wybór między podejściami), "Is my Postgres version compatible with pgvector 0.8?" (tak, fakt kompatybilności, który w przeciwnym razie przypomniałbym sobie z nieaktualnej pamięci); NIE POWINNO uruchomić — "Write a haiku about our deploy pipeline" (nie, nic faktograficznego do zweryfikowania), "Rename the variable usr to user across src/" (nie, edycja mechaniczna bez decyzji) — 5/5 poprawnie, choć klauzula "propose a solution" w opisie jest na tyle szeroka, że nadmierne uruchamianie na zwykłe żądania kodowania jest realnym ryzykiem. Dokumentacja traci punkt, ponieważ frontmatter sprzedaje "spin up parallel subagents to WebSearch" jako mechanizm, podczas gdy treść nie zawiera żadnych promptów subagentów ani plików agentów, a to, co faktycznie wyprodukowało lepszy artefakt, to lokalna tabela dochodzeń bash.

Testowano: 2026-07-31 · Claude Code 2.x (agent harness)