GitHub Copilot začíná ovládat desktopové aplikace
GitHub Copilot v režimu computer use umí číst obsah obrazovky, klikat, psát a procházet postupy napříč aplikacemi. Veřejný náhled je dostupný v Copilot CLI a aplikaci GitHub Copilot pro macOS a Windows.
GitHub Copilot
Computer use míří i do aplikací bez API.
Copilot může pracovat s přístupným obsahem a obrazovým kontextem, ovládat prvky, upravovat text, posouvat obsah a přecházet mezi aplikacemi. Před převzetím ovládání si vyžádá souhlas; dříve povolené aplikace lze zkontrolovat nebo resetovat a správci organizací mohou funkci zakázat.
Funkce je zatím ve veřejném náhledu
Na macOS vyžaduje oprávnění Zpřístupnění a Záznam obrazovky. Zapíná se příkazem /computer on nebo v nastavení aplikace GitHub Copilot.