Macos Computer Use
Macos Computer Use
Finding
Denne side er vigtig, fordi den viser Hermes’ native måde at styre rigtige macOS-apps i baggrunden uden at bygge skrøbelig GUI-automation i n8n eller LangGraph.
What it is
Macos Computer Use er en bundled Hermes-skill til at bruge `computer_use` på macOS. Den kan tage screenshots, læse tilgængelighedstræet, klikke på elementer, skrive tekst, scrolle og styre apps uden at overtage brugerens mus, tastaturfokus eller Space. Den anbefalede arbejdsgang er: capture først, klik på element-index, og verificér bagefter med ny capture.
Should we use it?
Use later. For Lisa’s Hermes+n8n+LangGraph mission er dette relevant, hvis Hermes senere skal hjælpe direkte i native Mac-apps som Finder, Mail, Messages, Figma eller andre desktopværktøjer. Det bør ikke aktiveres som standard i den nuværende server-/Telegram-/VPS-drift, fordi funktionen kræver macOS, lokale tilladelser og tydelige sikkerhedsgrænser. Den passer bedst som en særskilt Mac-operatørprofil, ikke som generelt workflow-lag.
Recommendation
Opret kun en dedikeret macOS-profil med `computer_use`, hvis Lisa får et konkret behov for native Mac desktop-arbejde; behold web, filer, terminal, n8n og LangGraph uden GUI-styring som standard.
Use now
- Når Hermes skal arbejde i en faktisk macOS-app, som ikke kan styres via browser-, terminal- eller filværktøjer.
- Når Lisa vil have baggrundsautomation på en Mac uden at miste mus, tastaturfokus eller aktivt Space.
- Når en opgave kræver visuel verifikation af en Mac-apps tilstand, fx Finder-dialoger, appindstillinger eller desktop-only UI.
- Når der bruges en separat, begrænset Mac-profil med klare tilladelser og lav risiko.
Do not use / wait
- Brug ikke `computer_use` til webopgaver, hvor Hermes’ browserværktøjer er mere robuste.
- Brug ikke funktionen til filredigering; brug `read_file`, `write_file` og `patch`.
- Brug ikke funktionen til shell-kommandoer; brug `terminal`.
- Vent med aktivering i Lisa’s standarddrift, fordi den nuværende kerne primært er Hermes på server/gateway, n8n-integrationer og LangGraph-orkestrering.
- Brug den aldrig til adgangskoder, 2FA, betalinger, permission dialogs eller personlige browserfaner uden eksplicit instruktion.
Public page note
Macos Computer Use viser, hvordan Hermes kan styre rigtige Mac-apps sikkert i baggrunden, men det bør kun bruges til konkrete desktop-opgaver og ikke som erstatning for native web-, fil- eller terminalværktøjer.