Il computer use è la capacità di un agente AI di usare il computer come una persona: legge lo schermo dallo screenshot, muove il cursore, clicca, digita e scorre in qualsiasi software, anche in programmi senza API.
Niente gergo, niente formule
L'agente lavora a loop di screenshot. Cattura lo schermo, il modello legge l'immagine come faresti tu, decide la prossima azione sull'interfaccia (clicca qui, digita quello, scorri) e un controllore la esegue tramite il livello di accessibilità o di input del sistema operativo. Poi uno screenshot nuovo conferma cosa è successo e il loop riparte. È così che automatizzi il software che nessuno riesce ad automatizzare: l'ERP del 2009, il portale doganale, il sito di prenotazione del fornitore, nessuno con una API. Si rompe in tre modi: layout fragili (un bottone spostato rompe il flusso), latenza (ogni passo è un viaggio screenshot, modello, azione) e rischio (un agente che sa cliccare “salva” sa cliccare anche “invia”: permessi e log non sono optional).
Vedi. Cattura lo schermo e leggilo come una persona.
Decidi. Scegli la prossima azione: clic, digitazione, scroll.
Agisci. Eseguila tramite il livello di input.
Verifica. Uno screenshot nuovo conferma che l'azione è andata.
Ripeti o fermati. Gira finché il compito è fatto o un permesso ti ferma.
Un AI agent è un software che persegue un obiettivo per tuo conto: legge la situazione, pianifica il passo successivo, agisce tramite strumenti (email, calendari, database, API) e verifica il risultato prima di continuare, invece di rispondere a una domanda e fermarsi.
LeggiIl tool use è la capacità di un modello AI di fare più che scrivere testo: può chiamare strumenti esterni, come cercare in un database, inviare una mail o eseguire un calcolo, emettendo una richiesta strutturata che il software esegue davvero.
LeggiIl loop dell'agente è il ciclo che un agente AI ripete inseguendo un obiettivo: osserva lo stato attuale, pianifica la prossima azione, agisce tramite uno strumento, verifica il risultato, poi continua, ri-pianifica o si ferma.
Leggi§ 04
Progettiamo e rilasciamo sistemi AI con permessi, log e approvazione umana. Si parte con una call di scoping di 30 minuti.