AuloryYour AI Learning Hub

Das KI-Vokabular · 05 Agenten

Was ist Computer Use?

KI, die einen Computer wie ein Mensch bedient: auf den Bildschirm schauen, klicken, tippen und zwischen Apps wechseln.

Fortgeschritten

Mit Computer Use steuert ein KI-Agent direkt einen Desktop oder Browser. Er macht Screenshots, entscheidet, wohin er klickt, tippt in Felder und navigiert zwischen Anwendungen, ganz ähnlich wie ein Mensch an der Tastatur. Mehrere KI-Anbieter bieten das inzwischen an, im Browser oder auf dem Desktop.

Nützlich ist das dort, wo es keine saubere Integration und kein passendes Tool gibt: alte Software, Websites ohne API, Formulare, die von Hand ausgefüllt werden müssen. Es ist aber langsamer und fehleranfälliger als eine direkte Integration. Und eine Website, die der Agent liest, kann versteckte Anweisungen enthalten, eine Form von Prompt Injection.

Warum es für dich wichtig ist

Computer Use kann dir mühsame Klickarbeit abnehmen, von der Dateneingabe bis zu Buchungsabläufen. Am besten passt es für wiederkehrende Aufgaben, die du danach leicht prüfen kannst.

Own it

Gib ihm ein eigenes Browserprofil oder Konto mit eingeschränkten Berechtigungen, halte es von Banking und Passwörtern fern und bleib als Human in the Loop bei allem dabei, was etwas abschickt, bezahlt oder versendet.

Woher es kommt

Anthropic stellte „Computer Use“ am 22. Oktober 2024 als öffentliche Beta vor: ein Modell, das Screenshots betrachtet und den Cursor bewegt, klickt und tippt wie ein Mensch (Anthropic). Es wurde ausdrücklich als experimentell bezeichnet, und andere Labore brachten bald eigene Agenten heraus, die den Bildschirm bedienen. Der Name blieb als allgemeiner Begriff für diese Fähigkeit.

Verwandt

KI-AgentToolBerechtigungenPrompt InjectionHuman in the Loop

Your AI Learning Hub

Lern das ganze KI-Vokabular, Schritt für Schritt, und bau damit. Build it. Own it.