Computer use v Claude: ovládání PC bez API

# Claude ovládá počítač: computer use v Cowork a Code od Anthropic

Anthropic integrovala technologii computer use do produktů Claude Cowork a Claude Code. Model nyní samostatně ovládá myš, klávesnici a obrazovku, otevírá prohlížeč, kliká na prvky a vyplňuje formuláře, pokud nejsou k dispozici přímé konektory.

Princip fungování computer use

Technologie debutovala v říjnu 2024 jako API pro vývojáře. V spotřebních produktech se aktivuje bez kódu: Claude nejprve zkontroluje přítomnost vestavěných integrací (Slack, Google Calendar), poté přejde na ovládání obrazovky. Před přístupem k nové aplikaci je vyžadováno explicitní povolení uživatele. Vestavěný skener monitoruje procesy z hlediska škodlivých akcí a blokuje podezřelé operace.

To umožňuje modelu řešit úkoly, kde API chybí: přechod odkazy, zadávání dat do formulářů, navigace v rozhraních. Rychlost je nižší než u přímých integrací, ale funkčnost je širší.

Integrace s Dispatch

Dispatch, spuštěný minulý týden, mění chytrý telefon na ovladač: úkol se odešle z mobilu a provede se na desktopu. Computer use posiluje tuto kombinaci:

• Automatizace rutinních úkolů: kontrola e-mailů, generování ranních shrnutí.
• DevOps operace: spuštění testů v IDE, vytváření pull requestů.
• Křížově platformové scénáře: ovládání desktopu z mobilního rozhraní.

Příklad workflow: vývojář z telefonu spustí úkol, Claude otevře terminál, spustí skripty a vrátí logy.

Omezení a bezpečnost

Funkce je v research preview pro předplatitele Pro/Max, pouze macOS. Anthropic zdůrazňuje její syrový stav:

• Složité úkoly vyžadují restart.
• Ovládání obrazovky je pomalejší než API.
• Blokování citlivých aplikací ve výchozím nastavení.

Doporučení:

• Používat s důvěryhodnými službami.
• Vyhnout se vysoce citlivým datům.
• Monitorovat povolení k přístupu.

Skener brání jailbreakům a neoprávněným akcím, ale spoléhat se na něj výhradně nestojí za to.

Co je důležité

• Univerzálnost: fallback na ovládání obrazovky rozšiřuje scénáře za hranice API.
• Bezpečnost: povinná povolení a skener minimalizují rizika.
• Integrace: Dispatch + computer use automatizuje end-to-end úkoly.
• Dostupnost: research preview na macOS pro Pro/Max.
• Výkon: vhodné pro prototypy, ne pro produkci.

Perspektivy pro vývojáře

Pro middle/senior specialisty computer use otevírá automatizaci bez custom integrací. V CI/CD lze delegovat Claude manuální nasazení, A/B testy UI nebo monitorování dashboardů. Ve spojení s IDE – generování PR s automatickými opravami.

Testování ukáže stabilitu na produkčních úlohách. Očekávejte rozšíření na Windows/Linux a plnou verzi.

— Editorial Team