Ste v zadnjem času opazili, da se vaša spletna stran občasno odziva počasneje? Ali da se stroški gostovanja spletne strani višajo, čeprav imate enako število obiskovalcev? Vzrok za to je morda presenetljiv in nima nič skupnega z vašimi pravimi obiskovalci.
Na spletu namreč poteka tiha revolucija, ki jo poganjajo avtomatizirani programi podjetij za umetno inteligenco. Ti tako imenovani AI roboti ali pajki (angleško crawlers oziroma scrapers) sistematično pregledujejo in kopirajo / povzemajo vsebine spletnih strani po celotnem internetu. Njihov namen je jasen: zbirati podatke za učenje velikih jezikovnih modelov, kot so ChatGPT, Gemini, Claude in drugi.
Težava? Teh robotov je vedno več, delujejo vse bolj agresivno, njihov vpliv na delovanje spletnih strani pa postaja vse bolj opazen. V tem članku bomo na podlagi najnovejših podatkov razložili, kaj se dogaja, kakšne so posledice za lastnike spletnih strani in kako se lahko zaščitite.
Podjetje Akamai, ki upravlja eno največjih infrastrukturnih omrežij na svetu in skozi katerega teče več kot tretjina svetovnega spletnega prometa, je v svojem poročilu Digital Fraud and Abuse Report 2025 razkrilo zaskrbljujoče trende. Promet, ki ga ustvarjajo AI roboti, se je v zadnjem letu povečal za 300 odstotkov. Ti roboti dnevno ustvarijo več kot milijardo zahtevkov na spletne strani po celotnem svetu.
Po podatkih podjetja TollBit, ki spremlja aktivnost povzemanja podatkov spletnih strani, je v zadnjem četrtletju leta 2025 že vsak petdeseti obisk spletne strani izviral od AI robota. Še v prvem četrtletju istega leta je bilo to razmerje en na dvesto. Gre za štirikratno povečanje v manj kot enem letu.
Posebno zaskrbljujoče je, da več kot 13 odstotkov zahtevkov AI robotov namerno zaobide datoteko robots.txt, torej mehanizem, s katerim lastniki spletnih strani določijo, katerih delov spletišča roboti ne smejo pregledovati. Delež robotov, ki ignorirajo ta navodila, se je v drugi polovici leta 2025 povečal za 400 odstotkov.
Za povprečnega lastnika spletne strani ali spletne trgovine ima množičen obisk AI robotov več neposrednih posledic.
Primerjava obeh tednov govori sama zase. V tednu od 2. do 9. februarja je sistem na Kabi strežnikih preprečil 29,1 milijona napadov. Že naslednji teden, od 9. do 16. februarja, pa se je ta številka povzpela na neverjetnih 536 milijonov. To je 18-kratno povečanje v enem samem tednu. Takšni skoki jasno kažejo, kako nepredvidljiva in intenzivna je lahko aktivnost avtomatiziranih robotov, zato je stalna zaščita in spremljanje prometa nujno.
Razlogov za tako hitro rast je več. Prvič, podjetja za umetno inteligenco tekmujejo med seboj, kdo bo svoje jezikovne modele učil na čim večji količini podatkov. Vsaka spletna stran z unikatno vsebino, bodisi članki, opisi izdelkov, strokovnimi nasveti ali uporabniškimi mnenji je za te modele dragocen vir podatkov. Drugič, poleg robotov za učenje modelov se širijo tudi tako imenovani iskalni ali pridobivalni roboti (retrieval bots), ki v realnem času pridobivajo informacije za odgovore AI orodij, kot sta ChatGPT ali Perplexity. Tretjič, tržišče za povzemanje / kopiranje spletnih vsebin izjemno raste. Podjetje TollBit je identificiralo že več kot 40 podjetij, ki ponujajo storitve povzemanja, prilagojene za AI namene.
Za spletne trgovine je ta trend še posebej občutljiv. AI roboti pogosto povzemajo celotne kataloge izdelkov, vključno s cenami, opisi in slikami. Te podatke lahko konkurenti uporabijo za samodejno prilagajanje svojih cen ali pa AI sistemi ponudijo uporabnikom povzetek informacij, ne da bi ti sploh obiskali vašo trgovino. Rezultat je enak: vaša vsebina dela za druge, vi pa nosite stroške ustvarjanja vsebin, vzdrževanje in ne nazadnje gostovanja.
Čeprav popolna zaščita pred AI roboti ni možna, obstajajo učinkoviti ukrepi, s katerimi lahko bistveno zmanjšate njihov vpliv.
Vse zgornje stvari pri Kabiju počnemo v sklopu vzdrževanja spletnih strani za naše stranke.
Trendi so jasni, AI promet na spletu bo le še naraščal. Glavni tehnološki direktor podjetja Akamai je bil jasen: umetna inteligenca spreminja splet, kot ga poznamo. "Oborožitvena tekma" med spletnimi stranmi in roboti bo določila prihodnji videz in delovanje interneta. Medtem, ko se nekatera podjetja prilagajajo in iščejo modele, v katerih bi AI podjetja plačevala za dostop do vsebin, se večina lastnikov spletnih strani sooča s preprostim dejstvom: zaščita pred AI roboti postaja enako nujna kot zaščita pred zlonamerno programsko opremo.
Število spletnih mest, ki aktivno blokirajo AI robote, se je v zadnjem letu povečalo za 336 odstotkov. To jasno kaže, da se lastniki spletišč zavedajo problema. A hkrati se roboti razvijajo. Nekateri že posnemajo človeško vedenje pri brskanju, spreminjajo hitrost klikov in dolžino sej, da bi se izognili zaznavanju.
AI roboti niso le abstraktna grožnja iz tehnoloških novic, so realnost, ki že danes vpliva na hitrost, stroške in varnost vaše spletne strani ali trgovine. Ne glede na to, ali upravljate spletno trgovino, podjetniško spletno stran ali informacijski portal, je čas za ukrepanje zdaj.
V podjetju Kabi se s temi izzivi ukvarjamo vsak dan. Z več kot 30 leti izkušenj na področju spletnih tehnologij smo priča evoluciji groženj iz prve roke. Naše storitve gostovanja in vzdrževanja spletnih strani vključujejo redno spremljanje prometa, nastavitve zaščitnih mehanizmov ter optimizacijo strežniške infrastrukture. Ker spletne rešitve razvijamo na lastni platformi, imamo nad delovanjem spletnih mest popoln nadzor in se lahko hitro odzovemo na nove grožnje. To je ena od ključnih prednosti lastnega sistema v primerjavi s odprtokodnimi platformami, kjer je varnostna odgovornost pogosto razpršena.
Vas zanima, kako je z AI prometom na vaši spletni strani? Kontaktirajte nas in skupaj bomo preverili stanje ter po potrebi uvedli ustrezne zaščitne ukrepe.
pisarna:
Dolenjska cesta 43
SI-1000 Ljubljana
sedež:
Pri mostiščarjih 13
SI-1000 Ljubljana
T: (01) 280 50 80
E: info@kabi.si
Nepremičnine Si21
Ponudba nepremičnin v Sloveniji in tujini
Novogradnje.com
Ponudba novogradenj v Sloveniji in tujini
Avto.info
Vedno sveže avto novice in oglasi rabljenih vozil
CRM za nepremičnine
Paketna ponudba za nepremičninske agencije
Si21.com
Prvi slovenski portal
antivirus.si
Varnostne rešitve WithSecure / F-Secure
Kabi CRM
Sistem za učinkovito upravljanje s strankami in priložnostmi
Kakšen je moj IP?
Preverite vaš IP naslov s klikom na povezavo.