Botët tani janë shumica e kërkesave në ueb: Cloudflare-i e vendos në 57,5%
Më 3 qershor 2026, drejtori ekzekutiv i Cloudflare-it, Matthew Prince, tha se sistemet e automatizuara zënë tani 57,5% të kërkesave HTTP për faqe uebi, përballë 42,5% nga njerëzit — hera e parë që Cloudflare-i e mat këtë kapërcim — dhe ia atribuoi zhvendosjen IA-së agjentike. 1 Në SXSW në mars ai kishte thënë se nuk e priste këtë deri në vitin 2027. 2
Ia vlen të jemi të saktë se çfarë është ajo shifër, sepse përsëritet si diçka më e madhe. Ajo numëron kërkesat për faqe uebi në gjithë rrjetin e Cloudflare-it. Nuk është gjerësi brezi, nuk është kohë e kaluar në internet dhe nuk është gjithë interneti: një bot që merr një faqe 5 KB dhe një person që hap një video numërohen të dy nga një herë. Njerëzit nuk kanë pushuar së përdoruri uebin.
Ajo që do të thotë vërtet është më e ngushtë dhe më e kushtueshme. Nëse operoni çfarëdo gjëje me një pikë publike HTTP, më shumë se gjysma e asaj që ju kërkohet nuk kërkohet më nga një person.
Gjerësia e brezit, CPU-ja, cache-i dhe grafikët tuaj
Trafiku i botëve nuk është falas thjesht sepse nuk është keqdashës.
Gjerësia e brezit është ajo e dukshmja, sepse çdo zvarritje është transferim, dhe në hosting me matje ajo është faturë e drejtpërdrejtë. CPU-ja është ajo më pak e dukshmja: një crawler që godet faqe dinamike mund ta ekzekutojë logjikën e aplikacionit tuaj, kërkesat e bazës suaj të të dhënave dhe renderimin e template-ve njësoj si një kërkesë e vërtetë, veçse nuk ndalet te një faqe dhe nuk ka cache sesioni.
Pastaj ka ndotjen e cache-it. Crawler-at priren të kërkojnë URL të bishtit të gjatë që marrin pak ose aspak trafik njerëzor, çka e nxjerr përmbajtjen e nxehtë nga cache-i juaj dhe e degradon performancën për përdoruesit e vërtetë. Dhe vëllimi i regjistrave e shtrembëron analitikën tuaj, kështu që nëse gjysma e grafikut tuaj të trafikut nuk janë klientë dhe nuk e keni ndarë, çdo vendim kapaciteti që merrni mbështetet në një numër të gabuar.
Modeli që i lëndon më shumë operatorët e vegjël është një crawler që zbulon një hapësirë URL-sh të gjeneruar dinamikisht — qoftë kërkim me faseta, kalendarë apo kombinime filtrash — dhe e numëron të gjithën. Një site me njëqind faqe përmbajtjeje mund të paraqesë një milion URL, dhe diçka përfundimisht do të provojë t'i marrë të gjitha.
Pesë gjëra që ndihmojnë
Shikoni regjistrat tuaj para çdo gjëje tjetër. Ndajeni trafikun sipas user agent-it dhe sipas ASN-së. Shumica e njerëzve befasohen nga raporti.
Trajtojeni robots.txt si kërkesë e jo si kontroll. Crawler-at e sjellshëm e nderojnë. Ata që ju shkaktojnë probleme shpesh nuk e nderojnë, dhe disa maskohen pas user agent-ëve rrotullues.
Kufizoni shpejtësinë sipas rrjetit e jo sipas user agent-it. Një crawler që gënjen se kush është, prapëseprapë vjen nga diku, dhe kufijtë për ASN e për prefiks i mbijetojnë falsifikimit të user agent-it.
Mbyllni hapësirat e pafundme të URL-ve. Mos nxirrni fare lidhje drejt permutacioneve të filtrave, sepse nofollow e shkurajon zvarritjen e nuk e parandalon; bllokoni kombinimet e parametrave të pyetjes që nuk keni pasur ndërmend të zvarriten; dhe kthejeni 404 në vend që të gjeneroni një faqe për çdo hyrje të mundshme.
Bëni cache me agresivitet dhe shërbeni nga cache-i. Një crawler që godet një përgjigje të ruajtur në cache ju kushton vetëm gjerësi brezi. Një crawler që godet aplikacionin tuaj ju kushton gjithçka.
Root, dhe rregulla që mund t'i lexoni
Këtu kanë rëndësi dy gjëra, dhe asnjëra nuk është veçori që e shpikëm për një postim blogu.
E para janë burimet e parashikueshme që i kontrolloni ju. Çdo VPS dhe VDS i AVS ISP është virtualizim i plotë KVM me akses si root, kështu që mbani nginx-in tuaj, kufizimin tuaj të shpejtësisë, rregullat tuaja fail2ban dhe shtresën tuaj të cache-it, të rregulluara sipas përzierjes suaj reale të trafikut. Nuk ka panel kontrolli të përbashkët që vendos se çfarë ju lejohet të bllokoni, dhe as WAF shitësi rregullat e të cilit nuk mund t'i lexoni.
E dyta është se mbrojtja nga DDoS-i përfshihet në çdo plan, çka mbulon skajin volumetrik të automatizimit armiqësor. Skaji i sjellshëm, por i shtrenjtë — crawler-at që nuk po ju sulmojnë dhe thjesht po ju lexojnë pa pushim — është çështje kapaciteti dhe konfigurimi. Pikërisht prandaj ka rëndësi root-i.
Planet nisin nga 5 €/muaj për një VPS, 40 €/muaj për një VDS me 4 vCPU duke u ngjitur në 160 €/muaj me 16, dhe 150 €/muaj për bare metal. VPS-të dhe VDS-të punojnë në Tiranë, Shkup, Amsterdam dhe Dublin, bare metal-i në Tiranë, Shkup dhe Amsterdam. Nëse shërbimi ndaj robotëve është tani gjysma e ngarkesës suaj të punës, mundësia për ta përmasuar dhe rregulluar atë ndershmërisht vlen më shumë se një plan që duket më i lirë derisa të mbërrijë fatura e transferimit.
Kush e paguan shumicën
Ka një debat të gjallë nëse zvarritja për stërvitjen e IA-së është përdorim i drejtë i një faqeje publike uebi, dhe nuk do të zgjidhet nga një blog hostingu. Ajo që nuk diskutohet është aritmetika. Shumica e kërkesave që godasin uebin tani janë të automatizuara, dikush po paguan për t'u shërbyer, dhe tani për tani ai dikush është kushdo që zotëron serverin e origjinës.
Sido që të përfundoni për etikën, vendosni me qëllim se çfarë pjese të kapacitetit tuaj jeni të gatshëm t'i dhuroni. Nëse jo, infrastruktura juaj e thith koston si parazgjedhje.
Burimet
- Bot Traffic Passes Humans Online: Cloudflare Says Agentic AI Drove 57.5% Share, Tech Times, 5 qershor 2026
- Online bot traffic will exceed human traffic by 2027, Cloudflare CEO says, TechCrunch, 19 mars 2026