Cosa è cambiato per chi ha un sito?
Il 30 ottobre 2026 OpenAI, Google e Microsoft hanno annunciato sui loro blog che rispetteranno un segnale comune nel robots.txt. È il file di testo che dice ai programmi automatici cosa possono leggere di un sito. Il nuovo segnale serve a dire una cosa sola, cioè se i tuoi testi possono essere usati per addestrare i modelli AI.
Finora dovevi scrivere una regola per ogni azienda, una per GPTBot di OpenAI, una per Google-Extended di Google e così via. Con il segnale comune scrivi una regola sola e la leggono tutte le aziende che aderiscono. Nasce da un gruppo di lavoro dell'IETF, l'ente che scrive gli standard di Internet. Per ora è una bozza, non ancora uno standard.
Quali righe devi scrivere?
Nel blog di Microsoft c'è l'esempio. Per dire no all'addestramento su tutto il sito aggiungi al robots.txt queste due righe.
- User-Agent: __usage_ai-training
- Disallow: /
Se vuoi chiudere solo una parte, al posto della barra metti la cartella, per esempio /listino/. Se non scrivi nulla vale il sì, cioè l'addestramento è permesso. Il segnale riguarda l'uso dei testi, non la lettura del sito, quindi non ti toglie dai risultati di ricerca.
Da quando vale, e per chi?
- Microsoft lo rispetta dal 1 febbraio 2027 per Bing, Copilot e Microsoft 365, man mano che rilegge le pagine.
- Google prevede di supportarlo nel 2027. Un no con il segnale comune varrà come un no a Google-Extended.
- OpenAI dice che lo applicherà nei prossimi mesi. Intanto restano valide le regole per GPTBot, il programma che raccoglie i testi per l'addestramento.
Chi oggi usa NoArchive o NoCache per Bing ha una scadenza. Dopo il 1 marzo 2027 Microsoft non li leggerà più come preferenza sull'addestramento e sull'uso nelle risposte AI. Va scritto il nuovo segnale prima di quella data.
Ti conviene dire no?
Dipende da cosa vende il tuo sito. Prendi un editore di guide tecniche che vive degli abbonamenti, o un'azienda che pubblica un listino frutto di anni di lavoro. Lì il no all'addestramento protegge un valore. Un'agenzia che pubblica articoli per farsi trovare ha meno motivi per chiudere.
Attenzione a non confondere due cose. Dire no all'addestramento è diverso dal bloccare i programmi che cercano le risposte. Secondo OpenAI, chi blocca OAI-SearchBot non compare nelle risposte di ricerca di ChatGPT. Microsoft avverte che chiudere l'uso nelle risposte AI riduce la visibilità del marchio in quei servizi.
E noi?
Sul nostro sito abbiamo fatto la scelta opposta. Il nostro robots.txt lascia leggere le pagine pubbliche a GPTBot, ClaudeBot, PerplexityBot e Google-Extended, e chiude solo le cartelle tecniche. Scriviamo questi articoli anche perché li leggano gli assistenti AI e li citino.
Quindi cosa fai?
- Se il sito vende contenuti, come guide, schede o listini, aggiungi le due righe del segnale comune e lascia le regole che hai già per GPTBot e Google-Extended.
- Se il sito serve a farti trovare, non bloccare OAI-SearchBot né il motore di ricerca, e decidi sull'addestramento con calma.
- Se usi NoArchive o NoCache per Bing, segnati la scadenza del 1 marzo 2027.
“Il robots.txt è la riga in cui decidi chi può imparare dal tuo lavoro. Rileggilo una volta l'anno.”
DBrothers — sulle regole dei siti per l'AI
Domande frequenti
Il segnale comune toglie il mio sito da Google?
No. Riguarda l'uso dei testi per l'addestramento, non la presenza nei risultati di ricerca. Anche Microsoft precisa che non cambia nulla per i risultati di Bing.
Le regole che ho già per GPTBot restano valide?
Sì. OpenAI e Google scrivono che GPTBot e Google-Extended continuano a funzionare accanto al segnale comune. Per Bing cambia invece qualcosa, perché le nuove preferenze sostituiscono NoArchive e NoCache.
Il no vale anche per i testi già raccolti?
Gli annunci parlano di come le aziende useranno i contenuti da quando leggono il segnale. Non dicono nulla dei testi già raccolti, quindi non darlo per scontato.
Apri oggi il robots.txt del tuo sito e controlla quali regole ci sono per l'AI. Se non sai chi l'ha scritto o cosa dice, è il primo file da rileggere con chi gestisce il sito.
