OpenAI ha esteso la funzione Computer Use dell’app desktop Codex su macOS, permettendo all’agente di usare le app del Mac anche quando lo schermo è spento e il dispositivo risulta bloccato. La novità arriva dopo l’annuncio di OpenAI Developers su X, con un esempio in cui un Mac bloccato mostra un overlay di Codex.
Come funziona la nuova modalità
Secondo quanto comunicato, gli utenti possono inviare task a Codex dal proprio telefono e far sì che l’agente operi sul Mac. Nel caso mostrato, il Mac bloccato visualizza un messaggio del tipo “Codex is Using Your Mac”, con l’indicazione di premere un tasto o fare clic per sbloccare.
Per l’operatività, è necessario installare il plugin Computer Use e concedere le autorizzazioni Screen Recording e Accessibility. Una volta configurato, Codex può:
- cliccare attraverso le finestre;
- digitare e navigare nei menu;
- interagire con il clipboard nelle app consentite.
Permessi e controllo sulle app
OpenAI indica che Codex chiede il permesso prima di operare su ogni nuova app. In aggiunta, gli utenti possono impostare alcune applicazioni come “Always allow”, così da consentire l’accesso senza dover confermare ogni volta.
La funzione è pensata per attività che risultano più difficili da gestire con strumenti solo da riga di comando, ad esempio la riproduzione di un bug legato a un’interfaccia grafica, la modifica di impostazioni di un’app o l’esecuzione di un flusso in una desktop app su cui Codex sta lavorando.
Cosa non può fare
La disponibilità della funzione non è totale: OpenAI specifica che al lancio non è disponibile in European Economic Area, Regno Unito e Svizzera. Inoltre, Codex non può automatizzare:
- le app Terminal;
- Codex stesso;
- le richieste di amministrazione a livello di sistema.
Altre novità recenti per Codex
L’aggiornamento si inserisce in un periodo di nuove funzioni per Codex. Tra le aggiunte citate ci sono:
- una funzione “Appshots”, che consente di acquisire uno screenshot e testo da una finestra di un’app e inserirli in un thread Codex tramite una scorciatoia;
- una modalità /goal, pensata per far lavorare un agente verso un obiettivo per ore o giorni.
Con questa estensione, Codex punta a rendere più pratiche le attività su desktop che richiedono interazione con elementi grafici, mantenendo però un sistema di autorizzazioni e limiti su ciò che l’agente può controllare.