OpenAI Codex nově ovládá aplikace i ve Windows 11

OpenAI rozšiřuje funkci Computer Use v desktopové aplikaci Codex také na Windows. Codex tak nově dokáže pracovat s aplikacemi ve Windows 11 podobně jako dříve na macOS. Umí vidět obsah obrazovky, klikat, psát, používat nabídky, klávesnici i schránku v povolených aplikacích.

Pro vývojáře je to důležitá změna. Codex už nemusí řešit jen kód v terminálu nebo editoru, ale může pracovat i s grafickým prostředím. Může například otestovat aplikaci, projít nastavení, reprodukovat chybu v uživatelském rozhraní, zkontrolovat dashboard nebo ověřit pracovní postup, který nejde jednoduše spustit přes příkazovou řádku.

Codex může pracovat s aplikacemi ve Windows

Funkce Computer Use funguje tak, že Codex používá vlastní virtuální myš a klávesnici. Uživatel mu zadá úkol a Codex se pokusí pracovat přímo v cílové aplikaci. Na Windows je ale důležité počítat s tím, že aplikace musí být viditelná v aktivní ploše a Codex při práci přebírá vstup v popředí.

To znamená, že nejde o úplně neviditelnou práci na pozadí jako u některých cloudových úloh. Pokud Codex pracuje s aplikací ve Windows, je lepší do toho počítače během úkolu nezasahovat, případně použít virtuální stroj nebo druhé zařízení pro sledování průběhu.

OpenAI zároveň uvádí, že Codex si před použitím aplikace vyžádá povolení. Uživatel může rozhodnout, zda dané aplikaci přístup povolí jednorázově, nebo trvale. To je důležité hlavně kvůli bezpečnosti, protože Codex může vidět obsah obrazovky, otevřené soubory a další data v aplikacích, se kterými pracuje.

Využití hlavně pro vývojáře

Největší smysl dává novinka při vývoji a testování aplikací. Codex může například spustit desktopovou aplikaci, projít konkrétní kroky, zkontrolovat chování rozhraní nebo ověřit, jestli oprava chyby skutečně funguje.

Hodit se může také při práci s interními nástroji, prohlížečem, databázovým rozhraním nebo aplikacemi, které nemají vlastní API. Právě tam je grafické ovládání užitečné, protože některé úkoly nejdou dobře automatizovat jen přes terminál.

Codex pro Windows zároveň podporuje běžné pracovní postupy jako práci napříč projekty, paralelní agentní vlákna, Git funkce, náhledy artefaktů, pluginy a nativní běh přes PowerShell nebo Windows sandbox.

Ovládání z mobilu

OpenAI dříve oznámila také možnost pracovat s Codexem přes mobilní aplikaci ChatGPT. Uživatel může z telefonu sledovat aktivní úlohy, schvalovat kroky, kontrolovat výstupy nebo zadávat další instrukce, zatímco Codex pracuje na počítači nebo v jiném vývojovém prostředí.

To může být praktické hlavně ve chvíli, kdy Codex běží delší úkol a vývojář nechce sedět celou dobu u počítače. Stav práce, výstupy, diffy, testy nebo schválení se mohou zobrazovat i v mobilní aplikaci.

Codex se posouvá blíž k reálnému počítači

Nová podpora Computer Use ve Windows ukazuje, kam se AI nástroje pro vývoj posouvají. Už nejde jen o psaní kódu nebo návrhy oprav. Codex se postupně stává agentem, který dokáže pracovat i s prostředím, ve kterém aplikace skutečně běží.

Pro vývojáře to může znamenat rychlejší testování, jednodušší ladění a méně ruční kontroly. Zároveň ale platí, že podobné funkce vyžadují opatrnost. Codex by měl dostávat jasně vymezené úkoly, citlivé aplikace by neměly být zbytečně otevřené a důležité kroky je vhodné kontrolovat.

Z pohledu MySmartHome je to další ukázka toho, že AI se postupně přesouvá z chatu do reálných pracovních nástrojů. Neodpovídá jen na otázky, ale začíná ovládat aplikace, testovat postupy a pomáhat přímo v prostředí, kde uživatel pracuje.

Časté dotazy k Codex Computer Use ve Windows

Co je Codex Computer Use?

Computer Use je funkce, která umožňuje Codexu vidět a ovládat grafické prostředí aplikací. Codex může klikat, psát, používat nabídky a pracovat s aplikací podobně jako uživatel.

Funguje Codex Computer Use ve Windows 11?

Ano, OpenAI v dokumentaci uvádí podporu Computer Use pro macOS i Windows. Na Windows ale Codex pracuje v popředí a cílová aplikace musí být viditelná na aktivní ploše.

K čemu se to hodí?

Hodí se hlavně pro testování aplikací, reprodukci chyb, kontrolu uživatelského rozhraní, práci v prohlížeči nebo použití nástrojů, které nemají API.

Je Codex dostupný i ve Free tarifu?

OpenAI uvádí, že Codex je zahrnutý v tarifech Free, Go, Plus, Pro, Business, Edu a Enterprise, ale limity se liší podle plánu. Některé funkce nebo dostupnost se mohou měnit podle regionu a typu účtu.

Redakce: MySmartHome