Video Vision

Lokale ffmpeg+Whisper pipeline waarmee Claude videobestanden kan bekijken en transcriberen

Door Moh4696 · Moh4696/claude-video-vision

Getest · Werkt ★ 10.0/10

Video Vision — Lokale ffmpeg+Whisper pipeline waarmee Claude videobestanden kan bekijken en transcriberen

Wat het doet

Extraheert gesamplede frames via ffmpeg en een getimede transcriptie via lokale Whisper, beantwoordt vervolgens vragen gebaseerd op zowel visueel als audiogewijs bewijs met [MM:SS] citaties. Wordt geactiveerd wanneer een gebruiker verwijst naar een lokaal videobestand (.mp4/.mov/.mkv/.webm/.avi/.m4v) en vraagt om het te bekijken, samenvatten, doorzoeken, van bijschriften voorzien of transcriberen; volledig offline na een eenmalige download van het Whisper-model.

Testrapport

De echte pipeline end-to-end getest tegen een synthetische testclip van 6 seconden: ffmpeg frame-extractie en lokale Whisper-transcriptie werden beide daadwerkelijk uitgevoerd en retourneerden de exacte JSON-manifestvorm die de README documenteert, tot op veldnamen toe. Geen netwerkoproepen behalve de onthulde eenmalige Whisper-modeldownload, geen exfiltratie, niets verborgen - geeft Claude daadwerkelijk een videokijkvaardigheid die het op geen enkele andere manier kan krijgen.

Getest op: 2026-07-16 · Claude Code 2.x (agent harness)

Installatie

git clone https://github.com/Moh4696/claude-video-vision ~/.claude/skills/video-vision

Commando's en voorbeeldprompts

  • /video-visionLokale ffmpeg+Whisper pipeline waarmee Claude videobestanden kan bekijken en transcriberen

Skills reageren op gewone verzoeken — geen commando's om te onthouden. Na installatie activeren prompts zoals deze de skill (in het Engels):

  • Can you watch this recorded meeting.mp4 and summarize what happened?
  • I need a searchable transcript with timestamps for this lecture video.
  • Caption this .mov clip and tell me what's said around the 2 minute mark.