// Blog
Alle Artikel AI OpsBrandFintechLifestyleAI NewsTutorialsGlossar
// amia.me
Über michModulesCVProjekteToolboxTeamNewsKontakt
// Glossar · Tier 1

Computer Use

KI, die einen Computer bedient wie ein Mensch — Maus, Tastatur, Browser, Anwendungen — statt über eine Programmierschnittstelle angebunden zu sein.

// Kurzantwort

Computer Use heißt: Die KI sieht den Bildschirm und bedient ihn — klickt, tippt, scrollt, wechselt zwischen Anwendungen. Der Unterschied zur klassischen Integration ist grundlegend: Es braucht keine Schnittstelle mehr, nur eine Oberfläche.

Bisher galt: Wer KI an ein System anbinden wollte, brauchte eine API. Gab es keine, ging es nicht — und genau daran scheiterten die meisten Automatisierungsvorhaben in Unternehmen, weil die entscheidenden Systeme oft die ältesten sind.

Computer Use dreht das um. Das Modell bekommt Zugriff auf Bildschirm, Maus und Tastatur und arbeitet sich durch die Oberfläche, so wie ein neuer Kollege es täte.

Der Unterschied zur API-Anbindung #

Beide Wege führen zum selben Ziel, aber sie verhalten sich völlig unterschiedlich:

KriteriumAPI-AnbindungComputer Use
VoraussetzungDas System muss eine Schnittstelle anbietenEs genügt eine Oberfläche
VerlässlichkeitHoch, deterministischSchwankend — die Oberfläche kann sich ändern
TempoMillisekundenMinuten, weil geklickt und gewartet wird
BerechtigungenFein steuerbar über Rollen und ScopesSo weit wie der angemeldete Nutzer reicht
NachvollziehbarkeitJeder Aufruf protokollierbarNur, wenn Bildschirm und Aktionen mitgeschrieben werden

Daraus folgt eine einfache Faustregel: Wo eine API existiert, nimm die API. Computer Use ist die Lösung für alles andere — und das ist in den meisten Unternehmen erstaunlich viel.

Wo es sich lohnt #

Der Nutzen ist dort am größten, wo Menschen heute stumpf zwischen Systemen übertragen: Daten aus einer Anwendung in eine andere, Formulare ausfüllen, Belege ablegen, Recherche über mehrere Quellen zusammentragen, ein Frontend im Browser durchklicken und Fehler protokollieren.

// Praxis · die ehrliche Rechnung

Computer Use ist langsamer als eine API und schneller als ein Mensch. Es lohnt sich bei Aufgaben, die oft genug anfallen, um zu nerven, aber zu selten, um eine Integration zu rechtfertigen. Genau dazwischen liegt der Großteil der Büroarbeit.

Grenzen und Governance #

Mit der Handlungsfähigkeit wächst die Angriffsfläche. Drei Punkte, die vor dem ersten produktiven Einsatz geklärt sein müssen:

Bezeichnend: Anbieter stufen leistungsfähige Computer-Use-Modelle inzwischen selbst als sicherheitskritisch ein und versehen sie mit Schutzmaßnahmen. Wer sie einsetzt, sollte diese Vorsicht nicht unterbieten.

Häufige Fragen #

Was ist der Unterschied zwischen Computer Use und RPA?

Klassische Robotic Process Automation folgt starren, aufgezeichneten Klickpfaden und bricht, sobald sich die Oberfläche ändert. Computer Use erkennt den Bildschirm inhaltlich und findet den Weg auch dann, wenn ein Knopf verschoben wurde. Der Preis dafür ist geringere Vorhersagbarkeit.

Ist Computer Use zuverlässig genug für produktive Prozesse?

Für abgegrenzte Aufgaben mit menschlicher Freigabe am Ende ja. Für unbeaufsichtigte Prozesse mit finanzieller oder rechtlicher Wirkung heute nicht. Die Zuverlässigkeit steigt schnell, die Governance muss mitwachsen.

Braucht Computer Use Zugriff auf meine Passwörter?

Es braucht einen angemeldeten Zugang — deshalb gehört dem Agenten ein eigener Account mit minimalen Rechten, nicht der persönliche oder der Admin-Zugang. Zugangsdaten selbst sollten nie im Klartext im Kontext des Modells landen.

Ersetzt Computer Use Integrationen?

Nein, es ergänzt sie. Wo eine API existiert, bleibt sie schneller, günstiger und besser protokollierbar. Computer Use erschließt die Systeme, für die es nie eine Schnittstelle geben wird.

Quellen #

// Ask Me

Welche Systeme bei euch haben keine API?

Frag mich — oder frag Ada. Sie ist meine KI-Assistentin, rund um die Uhr erreichbar, und schlägt dir bei Bedarf einen Termin mit mir vor. Kostenfrei, ohne Formular.