Agent Computer Use
Stuur elke desktop-app aan vanuit de terminal via de agent-cu CLI (snapshot/click/type)
Werkt met setup
Wat het doet
Een playbook voor het besturen van macOS/Linux/Windows/Electron desktop-apps via de agent-cu CLI met behulp van toegankelijkheids-API's: maak een snapshot van het scherm, identificeer element refs, klik/typ/toets/scroll/sleep, en verifieer vervolgens de status. Activeert bij desktop-automatiseringstaken zoals 'open Music and play X', 'fill out this form', of 'send a Slack message'. De skill markdown is zelfstandig, maar de agent-cu binary is een aparte cargo/npm installatie.
Testrapport
De SKILL.md is een ongewoon grondig desktop-automatisering playbook met geverifieerde Music/Calculator/Slack/Finder flows, een snapshot-identify-act-verify loop, en een gedetailleerde recovery ladder, maar de delta ten opzichte van geen skill kon hier niet worden gemeten: de agent-cu binary wordt afzonderlijk geleverd (cargo build of cargo install / npm) en vereist een live desktop GUI, dus de gebundelde wrapper rapporteert 'agent-cu binary not found' in een headless run. Het installeren van alleen de skill map geeft je de instructies, niet de tool. Het is de moeite waard om te vermelden dat de skill aanbiedt om zijn eigen toestemming globaal en zonder toezicht automatisch goed te keuren via `agent-cu setup --yes` (schrijft Bash(agent-cu *) naar settings) — afgebakend tot zijn eigen namespace en standaard door de gebruiker afgeschermd, maar let hierop voor installatie.
Getest op: 2026-07-17 · Claude Code 2.x (agent harness)
Installatie
git clone https://github.com/kortix-ai/agent-computer-use mkdir -p ~/.claude/skills cd agent-computer-use && cp -r skills/agent-computer-use ~/.claude/skills/agent-computer-use
Commando's en voorbeeldprompts
/agent-computer-useStuur elke desktop-app aan vanuit de terminal via de agent-cu CLI (snapshot/click/type)
Skills reageren op gewone verzoeken — geen commando's om te onthouden. Na installatie activeren prompts zoals deze de skill (in het Engels):
open Music and play my Espresso playlist for mefill out this signup form in Safari using my saved infosend a Slack message to my team from the desktop app