Computer Use (macOS)
Computer Use (macOS)
Finding
Denne side er vigtig, fordi den viser, at Hermes kan styre en Mac-desktop direkte og baggrundsvenligt uden at bygge separat GUI-automation i n8n eller LangGraph.
What it is
Computer Use er et Hermes-toolset til macOS, hvor agenten kan klikke, skrive, scrolle og læse skærmen via `cua-driver`. Det virker med tool-capable modeller på tværs af Claude, GPT, Gemini og lokale vision-modeller. Funktionen er især relevant til desktop-apps, e-mail, browserlignende flows og visuelle arbejdsgange, hvor en API eller browser-automation ikke er nok. Den er macOS-only og kræver macOS Accessibility- og Screen Recording-tilladelser.
Should we use it?
Use later. For Lisa’s Hermes+n8n+LangGraph mission er dette nyttigt som et specialværktøj til Mac-baserede menneske-apps, men ikke som kerneautomation lige nu. Hermes bør stadig være kernen for tools, skills, cron og gateway, mens n8n håndterer integrationsflows og LangGraph stateful agentflows. Computer Use bør først aktiveres, når der er et konkret Mac-desktop-behov, som ikke kan løses bedre med Hermes `browser`, MCP, API’er eller n8n.
Recommendation
Behandl Computer Use som et kontrolleret macOS-ekstra-toolset: brug det kun til konkrete desktop-opgaver på en Mac, med manuel approval slået til og med browser/API-baserede løsninger prioriteret først.
Use now
- Når Lisa skal have Hermes til at arbejde i en macOS-app, der ikke har en god API.
- Når en opgave kræver visuel forståelse af Mail, Safari, Electron-apps eller desktop-dialoger.
- Når browser-toolset ikke er nok, fordi opgaven foregår i en lokal desktop-app.
- Når en menneskelig operator kan godkende klik, skrivning og andre sideeffekter.
Do not use / wait
- Brug det ikke på Lisa’s Linux/VPS-baserede Hermes-drift; siden er macOS-only.
- Brug det ikke som erstatning for n8n-integrationsflows, API-kald eller LangGraph state orchestration.
- Brug det ikke til passwords, permission dialogs, destruktive handlinger eller shell-kommandoer.
- Vent med permanent aktivering, indtil der findes en gentagen Mac-desktop-opgave med klar værdi.
Public page note
Computer Use viser, hvordan Hermes kan udvide fra terminal og web til sikker, godkendt desktop-automation på macOS, uden at afsløre private apps, logs, skærmbilleder eller credentials.