Internet ha un secondo pubblico

Per la maggior parte della sua storia, Internet ha avuto un solo pubblico che pagava i conti: le persone. Leggevamo gli articoli, vedevamo le pubblicità e acquistavamo gli abbonamenti. I bot erano sempre presenti, ma si trattava per lo più di grandi operazioni automatizzate che non guardavano le pubblicità, non pagavano nulla e non leggevano in alcun senso significativo.

Tutto ciò sta cambiando rapidamente. Alla fine del 2024, Cloudflare gestiva una media di 63 milioni di richieste HTTP al secondo. Oggi, questo numero è quasi raddoppiato a 115 milioni, con picchi superiori a 150 milioni. Nell’ultimo anno, le richieste giornaliere degli agenti IA sulla nostra rete sono cresciute di oltre il 1.700 %. Quest’anno, per la prima volta, più della metà del traffico Internet non era di origine umana.

Il web umano non si è ridotto per fare spazio. Un secondo pubblico è arrivato al suo fianco: agenti, software che agisce per conto delle persone. Si collocano da qualche parte tra gli esseri umani e i bot tradizionali. Non rispondono agli annunci, ma di solito c’è una persona dietro di loro con un compito da svolgere. Per le aziende che imparano a servirli e a trarne valore, gli agenti sono aggiuntivi. Per quelle che non lo fanno, sono estrattivi.

Ciò di cui i nostri clienti hanno bisogno non è cambiato: essere scoperti, raccontare grandi storie, creare grandi esperienze e vendere. Ciò che è cambiato è che più della metà dei tuoi visitatori è ora software. Il nostro compito è aiutarti a servire entrambi i pubblici.

Più traffico, meno entrate

Per trent’anni, il web ha funzionato secondo un unico accordo: lasciavi che i motori di ricerca indicizzassero il tuo sito, ti inviavano visitatori e tu trasformavi quei visitatori in un’attività commerciale. Essere trovati ed essere pagati erano la stessa cosa.

L’IA ha fatto crollare questo delicato equilibrio. Ora i motori di risposta leggono la pagina e danno al lettore un riassunto. Questo costa larghezza di banda ai siti web senza portare un essere umano a un sito dove avvengono gli annunci o i pagamenti. Le macchine hanno continuato ad arrivare, e il pubblico che pagava per il web ha smesso di raggiungere quei siti. Alcune delle categorie più visitate dai crawler, come il commercio al dettaglio, i software informatici, i servizi IT e i servizi finanziari, hanno visto il traffico umano diminuire fino al 40 % in meno di un anno.

Il risultato è che le entrate per richiesta stanno diminuendo mentre i costi aumentano. Ogni richiesta automatizzata costa ancora larghezza di banda, capacità di calcolo e capacità di origine, e una quota crescente di queste richieste non porta alcun referral, nessuna impressione pubblicitaria e nessun abbonamento. Il nostro primo istinto è stato quello di bloccare tutto il traffico automatizzato. L’anno scorso abbiamo consigliato di bloccare i crawler di addestramento IA sui nuovi domini, in modo che i proprietari di siti potessero almeno dire no all’utilizzo dei loro contenuti per costruire modelli. Nella primavera del 2025, il 22 % delle richieste di crawler che abbiamo visto erano per l’addestramento IA (secondo lo scopo dichiarato dei crawler). A giugno 2026, era il 52 %. Il problema è che un “no” generale non è un approccio sufficientemente sfumato per l’economia di Internet che si sta costruendo in questo momento.

L’opportunità è lì per chi vuole servire gli agenti. Farlo bene significa essere all’avanguardia di un nuovo modello di business. Farlo male porterà agli stessi risultati di generazioni di siti web che si sono trovati dal lato sbagliato dei cambiamenti degli algoritmi dei motori di ricerca.

Una parte di quel traffico è un cliente

Un agente che prenota un tavolo, confronta preventivi assicurativi o acquista un set di dati per un ricercatore è un cliente. Semplicemente non è umano.

La parte in più rapida crescita del traffico automatizzato non sono più i crawler. Sono gli agenti: software che recupera pagine per conto di una persona, spesso perché l’essere umano ha posto una domanda a un chatbot. Questo traffico di agenti segue le routine umane, con un ritmo settimanale e un calo durante le vacanze estive. Rifiutare un agente potrebbe significare rifiutare la persona che lo ha inviato.

Gli agenti si comportano anche diversamente dai crawler di addestramento. Un crawler di addestramento raccoglie le tue pagine per costruire un modello. Un agente ritorna ogni volta che qualcuno fa una domanda su quel contenuto, quindi questo traffico cresce con il numero di domande che le persone fanno, non con quanto si pubblica.

Non si può fare affari con un pubblico che non si può vedere, non si può distinguere, per cui non si possono stabilire condizioni e che non si può addebitare. Fino a poco tempo fa, per la maggior parte del traffico web non umano, nessuna di queste quattro cose era possibile.

Scopri chi ti visita davvero

“Bot IA” non significa più nulla di utile. Ciò che conta è cosa fa un bot. AI Crawl Control, Business Insights e BotBase di Cloudflare mostrano ai proprietari di siti chi sta facendo crawling, cosa viene preso, cosa ritorna e quali dei tuoi URL sono più richiesti.

Il nome di un bot vale qualcosa solo se ci si può fidare di esso. Con Web Bot Auth, gli operatori, tra cui OpenAI, Google e AWS, firmano crittograficamente le richieste dei loro agenti, così un sito può distinguere un vero agente da un impostore senza dover indovinare dagli indirizzi IP o dalle stringhe user-agent. Vediamo più di 500 miliardi di richieste di bot verificate ogni settimana

Stabilisci le tue condizioni

A luglio, abbiamo sostituito il singolo interruttore “blocca bot IA” con controlli separati per ricerca, agente e addestramento, disponibili su ogni piano, incluso quello gratuito. I dati hanno mostrato perché questa distinzione era necessaria. Meno dell’1 % dei siti su Cloudflare blocca i crawler di ricerca, mentre il 17 % blocca l’addestramento. I proprietari di siti non hanno mai cercato di nascondersi. Ma con l’ascesa del traffico agentico e i nuovi modi in cui gli agenti usano le informazioni, si sono ritrovati improvvisamente senza visibilità su come venivano utilizzati i loro contenuti, senza alcuna scelta in merito. Essere trovati non garantisce più di essere pagati e, anche quando succede, non bisognerebbe permettere di farsi sfruttare.

Ciò è particolarmente difficile nel caso dei crawler a uso misto. Quando un bot fa sia ricerca che addestramento, rifiutare l’uno significa rifiutare l’altro. Il 15 settembre, abbiamo rilasciato Disallow AI Training, una soluzione che mantiene il tuo sito indicizzato per la ricercar grazie a meccanismi specifici del crawler per istruire l’operatore a non usare i tuoi dati per l’addestramento. Apple, Google e Microsoft si sono impegnati a rispettarlo. Cloudflare Radar monitora anche pubblicamente il comportamento dei crawler.

I nuovi domini vedono ora configurazioni consigliate basate su come il sito guadagna, piuttosto che su quale software lo visita. Per i siti finanziati dalla pubblicità, puoi facilmente vietare l’addestramento e bloccare gli agenti sulle pagine che contengono annunci, perché un annuncio paga solo quando una persona lo vede. Puoi modificare queste impostazioni in qualsiasi momento.

Fatti pagare

Nell’agosto 2026, abbiamo descritto l’Internet agentico che stiamo costruendo come leggibile, individuabile, richiamabile e pagabile. L’ultima parola, pagabile, è quella che determina se il web aperto può autofinanziarsi. Il web ha bisogno di un modo per dire ‘sì, se paghi‘ invece di un semplice ‘sì‘ o ‘no‘.

Il mercato delle licenze mostra sia l’entità della domanda che dove si trovano le lacune. Dal 2023 sono stati firmati più di 50 accordi tra editori e IA. Quasi tutti sono su misura e bilaterali, tra grandi editori e grandi aziende IA. Dimostrano che i contenuti hanno valore. Ma non raggiungono la maggior parte del web, né la maggior parte degli acquirenti.

Le risorse non vanno vendute tutte nello stesso modo. I contenuti e i set di dati di alto valore hanno bisogno di una rete fidata, dove gli acquirenti vengono identificati e riferiscono come è stato utilizzato il lavoro. Servizi come le API e gli strumenti MCP non funzionano così: ogni richiesta è l’utilizzo.

Stiamo lavorando per entrambi i casi.

Il Pay Per Use raggiunge i siti che il licenziamento diretto non può raggiungere. La maggior parte degli editori non otterrà mai un accordo su misura con ogni azienda IA e nessuna azienda IA può negoziare con milioni di siti. Il Pay Per Use è il ponte: non addebita per il crawling ma paga quando il contenuto viene effettivamente utilizzato. Ogni acquirente è un crawler verificato, questo è ciò che rende questa una rete fidata e ognuno definisce cosa conta come utilizzo e quanto pagherà.

Gli editori vedono l’offerta, scelgono se aderire e possono rinunciare quando smette di funzionare per loro. L’acquirente segnala ogni utilizzo, Cloudflare verifica quei rapporti, poi fattura all’acquirente e paga l’editore. Il reporting è importante quanto il pagamento. Gli editori vedono cosa è stato usato, quando e quanto hanno guadagnato, e, dove l’acquirente lo segnala, informazioni su quali domande hanno portato alla luce il loro lavoro. Gli accordi di licenza raramente mostrano nulla di tutto ciò. Crea un ciclo di feedback: gli editori imparano cosa chiedono davvero le persone, e da ciò possono decidere cosa coprire, cosa aggiornare e cosa rendere facilmente disponibile agli agenti.

Non ci sarà un’unica definizione di utilizzo. Un motore di ricerca che cita una fonte, un agente di ricerca che cita un passaggio e un agente di acquisto che completa un acquisto creano diversi tipi di valore, e ognuno vorrà il proprio modello di business. Gli acquirenti possono partecipare attraverso più modelli di business usando le stesse basi, senza nuova integrazione per gli editori. Prendi una rivista di settore per ingegneri navali, con qualche migliaio di abbonati e poche possibilità di un accordo di licenza IA. Viene pagata da ogni azienda IA partecipante che si avvale del suo lavoro.

Monetization Gateway cattura valore che non aveva mai avuto modo di cambiare mani. Account, chiavi API e abbonamenti funzionano per i clienti che già conosci, non per un agente che vuole una singola ricerca da un servizio che non ha mai usato prima. La nostra beta chiusa consente ai clienti Cloudflare statunitensi idonei di fissare un prezzo su qualsiasi cosa che passa attraverso noi, usando il linguaggio delle regole che già conoscono. Quando una regola corrisponde, restituiamo HTTP 402 Payment Required usando il protocollo aperto x402, e l’agente paga il venditore direttamente.

Questo fa molto di più che recuperare entrate perse. Gli agenti sono clienti a tutti gli effetti: pagano per i dati, le API e gli strumenti che utilizzano, che la richiesta sia l’intero acquisto o un passaggio in un’attività più ampia.

Monetization Gateway prezza per richiesta, per interrogazione o per token, a prezzi fissi o con limite massimo. Un sito di statistiche sportive basato sulla pubblicità può addebitare una frazione di centesimo ogni volta che un agente chiede “chi guida la classifica degli assist?” Quando abbiamo annunciato Monetization Gateway, migliaia di venditori si sono iscritti alla lista d’attesa, e la loro richiesta più comune era “addebitare agli agenti, non agli umani”. Siamo anche il nostro primo cliente. AI Gateway di Cloudflare usa Monetization Gateway per consentire agli agenti di pagare per l’inferenza, così troviamo i punti critici prima dei nostri clienti.

Per gli acquirenti, entrambi i prodotti superano una pagina di blocco: accesso affidabile e un modo per raggiungere milioni di siti invece di un accordo di licenza o una chiave API alla volta. Ogni richiesta pagata lascia una ricevuta che mostra cosa è stato acquistato e che è stato pagato.

Sia Pay Per Use che Monetization Gateway sono scommesse, costruite con i clienti su elementi fondamentali condivisi: identità, misurazione, prezzi, liquidazione e analisi. Lavorano insieme, così un editore può vietare l’addestramento, consentire la ricerca, guadagnare dalle risposte IA e addebitare agli agenti per articolo da un unico dashboard. I prezzi e la scopribilità non sono ancora risolti, motivo per cui entrambi vengono lanciati come beta, modellati da clienti reali e transazioni reali.

Rendere ogni richiesta meno costosa

Il pagamento è la risposta al calo delle entrate. L’aumento dei costi è un problema diverso, e gran parte di esso è semplicemente spreco. La maggior parte dei crawler scarica ancora pagine costruite per gli esseri umani, più e più volte, per estrarre pochi paragrafi di testo. Troppo spesso, i bot crawlano siti che non sono cambiati dall’ultimo tentativo. Questo brucia larghezza di banda per il sito e capacità di calcolo per il crawler, e avviene prima che venga scritta qualsiasi risposta. Stiamo lavorando con i nostri clienti e i crawler su strumenti che aiuteranno. Oggi puoi vedere il consumo di larghezza di banda per operatore nel nostro dashboard.

A luglio, abbiamo annunciato un progetto di ricerca congiunto con OpenAI, un pilot senza precedenti per esplorare come le informazioni della rete globale di Cloudflare possono aiutare i motori di ricerca IA a scoprire e indicizzare contenuti rilevanti sul web aperto in modo più efficiente ed efficace. Abbiamo in programma di condividere i nostri risultati iniziali nelle prossime settimane.

Per i nostri clienti, stiamo rilasciando strumenti ed esperienze in un clic per ottimizzare i loro siti per questo nuovo tipo di traffico. Markdown for Agents consente agli agenti di leggere una pagina senza lo stile aggiuntivo pensato per gli occhi umani e WebMCP consente a un sito di esporre azioni direttamente invece di far indovinare agli agenti quale pulsante premere.

Perché costruire su Cloudflare

Più del 20 % del web è dietro la rete di Cloudflare, e lo sono anche quasi l’80% delle principali aziende IA. Vediamo entrambi i lati di questo mercato. Costruiamo le basi per la visibilità, l’identità, i controlli e la liquidazione, e lasciamo che il mercato determini il valore delle cose.

Il vecchio accordo è finito, e quello nuovo è ancora in fase di scrittura. Insieme possiamo plasmare ciò che accade dopo.

In una versione, poche aziende controllano come gli agenti trovano le cose, provano chi sono e pagano, e tutti gli altri passano attraverso di loro. Nell’altra, questi elementi sono standard aperti che chiunque può implementare, e un sito di qualsiasi dimensione può stabilire le proprie condizioni ed essere pagato. Noi preferiamo quest’ultima.

Ecco perché queste basi funzionano su standard aperti come x402 e Web Bot Auth, in modo che chiunque possa costruire su di esse. I proprietari di dominio scelgono i propri provider di identità, i propri processori di pagamenti, i propri partner agenti. Cloudflare è un’opzione, non l’intero stack.

Per decenni, il web è stato pagato dalle persone che lo visitavano. Ora il software che le visita per loro conto può pagare la sua parte.