Cloudflare: boții generează majoritatea traficului web

Traficul către site-uri pe rețeaua Cloudflare este în proporție de peste jumătate automatizat, iar numărul cererilor zilnice provenite de la agenți AI a crescut cu peste 1700% în ultimul an. Compania, care își sărbătorește cea de-a șaisprezecea aniversare, a numit, în raportul publicat pe 30 septembrie, software-urile care navighează și îndeplinesc sarcini în numele oamenilor drept „al doilea public” al internetului. Potrivit comunicatului, aceasta gestionează în medie 115 milioane de cereri HTTP pe secundă, față de 63 de milioane la sfârșitul lui 2024. Traficul automatizat este însă o categorie mai largă decât cea a agenților AI: include și activitatea roboților de căutare tradiționali și a altor boți.

Schimbarea afectează și logica de finanțare a internetului practicată până acum. Motoarele de căutare indexau anterior site-urile web, apoi direcționau vizitatori către ele, care vedeau reclame, se abonau sau cumpărau. În schimb, serviciile de AI folosesc adesea informațiile găsite pe site-uri pentru a formula răspunsuri, fără ca utilizatorul să mai ajungă la sursa originală. Potrivit Cloudflare, în unele dintre categoriile cele mai intens indexate, printre care comerțul cu amănuntul, industria de software și serviciile financiare, numărul vizitelor umane a scăzut cu până la 40% în mai puțin de un an. Interogările automate continuă între timp să consume resurse, fără a aduce însă neapărat venituri operatorului site-ului. O soluție la această problemă ar fi Monetization Gateway, a cărui versiune beta închisă permite clienților eligibili din Statele Unite ai Cloudflare să stabilească o taxă pentru resursele lor accesibile prin rețea: site-uri web, seturi de date, interfețe de programare sau instrumente utilizabile de agenții AI. Sistemul, construit pe protocolul deschis x402, trimite un răspuns HTTP 402 care indică o obligație de plată atunci când cererea corespunde unei reguli de tarifare, iar agentul poate plăti direct vânzătorului. După anunțul din vară, mii de persoane s-au înscris pe lista de așteptare, iar potrivit companiei, cererea recurentă a fost ca vizitatorii automatizați să plătească, în timp ce accesul publicului uman să rămână neschimbat.

Pay Per Use ar oferi o oportunitate de venituri în principal editorilor care, din cauza dimensiunii sau a poziției lor de negociere, nu pot încheia acorduri de licențiere separate cu companiile de AI. În cadrul acestui sistem, plata este legată de utilizarea efectivă a conținutului, nu doar de faptul că un robot a descărcat pagina. Cumpărătorii participanți funcționează ca crawlere web verificate, stabilesc ce anume consideră drept utilizare și cât plătesc pentru aceasta, iar editorii pot decide dacă acceptă oferta. Cele două soluții de plată se află deocamdată în fază beta. Controlul asupra conținutului este susținut și de funcția Disallow AI Training, introdusă pe 15 septembrie, care permite ca un site să apară în continuare în motoarele de căutare, indicând totodată că nu permite utilizarea conținutului său pentru antrenarea modelelor. Potrivit Cloudflare, Apple, Google și Microsoft s-au angajat să respecte această opțiune. Aceasta se bazează pe semnale acceptate de respectivii furnizori de servicii, permițând astfel reglementarea separată a prezenței în motoarele de căutare și a utilizării pentru antrenare, și nu reprezintă o protecție tehnică împotriva copierii valabilă față de toți actorii de pe internet.

Printre anunțurile de securitate ale săptămânii aniversare se numără extinderea accesului gratuit la Threat Events Platform pentru toate conturile Cloudflare, precum și lansarea Threat Signals. Acesta din urmă prelucrează rapoarte de securitate disponibile public: le rezumă, identifică urmele tehnice asociate atacurilor, precum domeniile și adresele IP malițioase, apoi organizează informațiile sub formă de evenimente etichetate. Versiunea gratuită oferă procesarea unui flux RSS ales de utilizator și stocarea datelor rezultate pentru cel mult treizeci de zile; pachetele pentru companii adaugă mai multe surse, baze de date suplimentare privind amenințările și opțiuni de configurare mai ample. Application Profiles învață structura și formatul obișnuit al cererilor primite de aplicațiile web, apoi semnalează traficul care diferă de acestea. Astfel, poate ajuta la identificarea cererilor suspecte care nu se potrivesc tiparului unui atac deja cunoscut, dar care, de exemplu, conțin text acolo unde aplicația așteaptă un număr. Semnalarea în sine nu blochează cererea: operatorul poate stabili reguli de blocare după examinarea datelor. Potrivit Cloudflare, acest lucru este important mai ales pentru că AI le facilitează și atacatorilor variarea rapidă a metodelor de atac. Funcția este deja disponibilă clienților API Security, iar alți clienți din categoria enterprise, invitați special, o pot testa în versiune beta închisă.

Matthew Prince și Michelle Zatlyn, fondatorii Cloudflare, au scris în scrisoarea lor anuală că se așteptau inițial ca traficul automatizat să devină majoritar abia în a doua jumătate a lui 2027, însă schimbarea s-a produs deja în mai 2026. Dacă tendințele actuale continuă, potrivit lor, traficul automatizat ar putea ajunge, în cinci ani, de o mie de ori mai mare decât traficul uman. Este o prognoză bazată pe extinderea explozivă a activității agenților: pentru a răspunde la o singură întrebare a unui utilizator, software-ul poate accesa chiar și câteva sute sau mii de pagini. Întrebarea centrală a anunțurilor este, prin urmare, cum pot obține venituri site-urile care furnizează conținut și servicii pentru astfel de răspunsuri, în condițiile în care utilizatorul nu mai ajunge neapărat să le viziteze.

Ugar