Az elefánt az adatközpontban

A weboldalad ostrom alatt áll. Nem hackerek támadják, hanem barátságos AI botok, amelyek mohón falják a sávszélességedet. Az infrastruktúrád erre nem készült fel.

Tudtad, hogy a nagy CDN-eken átfolyó forgalom kb. 32%-a automatizált? Keresőmotorok, uptime ellenőrzők, hirdetési trackerek – mind ott vannak. De ma már az AI asszisztensek és tréning botok uralják a terepet. Ezek nem felhasználóknak böngésznek, hanem enciklopédiát építenek.

Az AI botok nem rosszak. Sokan pont azt akarjuk, hogy indexeljék a tartalmunkat. Fejlesztők örülnek, ha a doksijuk bekerült a ChatGPT-be. Webshopok szeretnék, ha termékeik AI keresőkben felbukkannak. Kiadók pedig új bevételi modelleket keresnek az AI-licencelésben.

A gond az, hogy az AI forgalom mintázata teljesen más, mint az emberi. A CDN-ek mégis arra kényszerítenek, hogy az egyiket vagy a másikat válaszd.

Miért rombolja szét az AI a cache-t

Nézzük, hogyan működik a cache. Felhasználó kér egy oldalt? A CDN megnézi, van-e friss másolat közelben. Ha igen, villámgyorsan kiszolgál. Ha nincs, az origin szerverhez fordul – lassabb, több erőforrás.

A cache akkor hatékony, ha a gyakran kért tartalmat tartja kéznél. Ez jól működik embereknél: főoldal, kategóriák, népszerű cikkek. A cache alkalmazkodik.

Aztán jönnek az AI botok, és kész a káosz.

Íme, mit művelnek:

1. Mindenkit egyenletesen ostromolnak. Ember 20 oldalt néz meg. AI bot ezreket szed össze célzottan. Több mint 90% újszerű URL, amit soha többet nem kérnek.

2. Ugrálnak véletlenszerűen. Nincs logikus út: doksi, képek, régi posztok, API leírások – mind egyszerre, párhuzamosan. Ez szennyezi a cache-t, kiszorítva a valódi usereket.

3. Hatékonyatlanok. Rossz URL-kezelés, sok 404 és redirect. Többször spawnolnak új instanciákat anélkül, hogy megosztanák az adatokat. Újra és újra friss cache miss.

Eredmény? A cache tele van egyszeri cuccokkal, az emberekét kidobja. Miss rate az egekbe, origin szerver roskadozik, költségek felrobbannak.

A lehetetlen választás

Vagy emberre optimalizálsz, és az AI tönkreteszi a teljesítményt. Vagy AI-ra, és az emberek lassan kapnak választ. Nincs jó út.

A mai CDN-ek a régi világra épültek, amikor csak pár keresőbot volt. Most az AI tréningek túlszárnyalják őket – újra kell gondolni mindent.

Mi történik a gyakorlatban

Friss kutatás (Zhangék, 2025 Cloud Computing Symposium) elemezte valós CDN adatokat. A tények kemények:

• Magas egyedi URL arány az AI botoknál – szinte minden kérés új tartalom.
• Változatos célpontok – doksik, kódok, média, semmi nem ismétlődik hatékonyan.
• Hatékonyatlan mintázatok – sok sikertelen kérés, redirectek pazarlása.

A tréning botok a legrosszabbak: mindent akarnak, ellentétben a keresőkkel, amik a népszerűre fókuszálnak.

Hogyan tovább

Jó hír: a CDN-szolgáltatók dolgoznak az új cache architektúrán. Nem blokkolás, nem vagy-vagy – hanem dinamikus szegmentálás.

Lehetséges megoldások:

Külön cache szintek: Emberi és AI forgalom külön optimalizálva, без versenyzés.

Okos bot felismerés: Jó AI-kat (indexelők) máshova irányítjuk, mint a pazarló tréningeket.

Költségalapú cache: Fizess a crawl-ért, érték alapján.

Rugalmas TTL: AI tartalomra más frissítési szabályok, mint az emberire.

Mit jelent ez neked

Ha weboldalt vagy appot üzemeltetsz, figyelj oda.

Fejlesztők: Doksid legyen AI-barát, de ne lassítsd le a valódi usereket.

Webshopok: Termékek AI keresőkben jók, de ne fulladjon be a fizetés cache miatt.

Kiadók: Licencelj AI-nak, de tartsd gyorsnak az olvasást.

Mindenki CDN-nel: Monitorozd a bot forgalmadat. Beszélj a szolgáltatóddal szegmentálásról.

A nagy kép

Ez nem csak technikai gond – ez fordulópont. Az emberközpontú web ütközik az AI-korszakkal. Fáj, de jobb infrastruktúra jön mindenkinek.

A jövő CDN-jei nem kérdezik, hogy ember vagy AI – mindkettőt okosan kezelik, olcsón.

A cache-d fejlődjön a mai webbel, ne a tegnapiakkal.

Kész vagy arra, hogy tartalmad embereknek és AI botoknak is repüljön? A NameOcean Vibe Hostingján okos cache optimalizáció van, mai forgalomra szabva. Mi az igazi webnek építünk infrastruktúrát – nem a réginek.