Miért bukdácsol 96%-nyi weboldal az AI-ügynök teszten – és mit jelent ez a te vállalkozásodnak?

Az AI és a web körül folyó vita eddig főleg védekezésről szólt. A site-tulajok azt kérdezik, hogyan tartsák távol a botokat, hogyan blokkolják a scrapereket, vagy hogyan szedjenek pénzt a nem kívánt crawlerektől. Érthető aggodalom – a Cloudflare egyedül naponta milliárdnyi AI-crawler kérést utasít vissza, a nagy regisztrátorok pedig külön termékeket építettek erre a kapuzárásra.

De itt a csavar: a valódi lehetőség nem a blokkolásban rejlik. Hanem abban, hogy beengeded a jó AI-ügynököket – és a legtöbb oldal erre semmilyen módon nem áll készen.

A 4%-os valóság

2026 áprilisában a Cloudflare megfordította a pályát az Is Your Site Agent-Ready? nevű eszközével. Nem a védelmet méri, hanem azt, hogy az oldalod mennyire tud együttműködni az AI-ügynökökkel. A 200 ezer leglátogatottabb domain eredményei lesújtóak:

• 78%-nak van alap robots.txt-je
• Csak 4% jelzi az AI-használati preferenciáit
• 15 site-nál kevesebb támogat ügynök-hitelesítést vagy géppel olvasható API-kat

Gondold át. A web legnagyobb traffic-vezérei nincsenek felkészülve azokra az ügynökökre, amelyek hamarosan nélkülözhetetlenek lesznek a felhasználói élményben. Az e-kereskedelmi oldalad blokkolhatja a vásárlóügynököket, amelyek rengeteg konverziót hoznának. A SaaS-platformod láthatatlan maradhat az AI-asszisztensek előtt, amelyek beépíthetnék a eszközeidet.

Nem arról van szó, hogy blokkolni jó vagy rossz. Hanem arról, hogy pénzt hagysz az asztalon, ha nem válogatsz meg, kit engedsz be.

Két szintű felkészültség

Stratégiai részhez értünk. Egy okos oldal meg tudja tenni mindkettőt: blokkolja a rossz tréning-crawlereket, miközben teljesen nyitott a hasznos ügynökök felé. A Cloudflare-scanner azt kérdezi, támogatja-e a infrastruktúrád ezt a finomságot.

Négy kategóriában pontoz:

1. szint: Könnyű pontok (amit a legtöbb site elszúr)

Felfedezhetőség: Van-e robots.txt, sitemap és HTTP Link header, ami ohne HTML-parsinggal mutatja a kulcsforrásokat? Egyszerűnek tűnik, de a Cloudflare-adatok szerint nem az.

Tartalomhozzáférés: Ha az ügynök Accept: text/markdown headert küld, kapsz-e tiszta, parseolható Markdownot? Aki ezt tudja, token-felhasználása 80%-kal csökken – gyorsabb válaszok, olcsóbb API-k, jobb élmény. A te infrastruktúrád valószínűleg még nem bírja.

2. szint: Szerkezeti lyuk (itt bukik meg mindenki)

Bot-hozzáférés-vezérlés: Itt találkozik a védelem és az együttműködés. Robots.txt-be Content Signals direktívák – külön szabályozod az AI-tréninget, inferenciát és keresőindexelést. Plusz Web Bot Auth kriptós identitásellenőrzésre. Csak megbízható ügynökök jöhetnek.

Képességek: A kulcs. Géppel olvasható leírások arról, mit tud az oldalad: Agent Skills indexek, API-katalógusok, OAuth-felfedezés, MCP Server Cards, WebMCP-támogatás. Ezek nem csak a létezésedet mondják el, hanem hogy hogyan lépj kapcsolatba veled doksi nélkül.

Képzeld el: egy AI-vásárlóügynök automatán rátalál, hogy OAuth-t fogadsz, shipping API-kkal mész, WebMCP-transzakciókat kezelsz. Ügyfeleket irányít hozzád ember nélkül. Ez a súrlódásmentes kereskedelem.

De az egész adathalmazban 15 domainnél kevesebb tette meg.

Miért van ez a szakadék – és miért a te gondod?

Nem véletlen a lyuk – generációs. A legtöbb oldal böngészőkre készült, nem ügynökökre. A te infrastruktúrád emberlátogatókra optimalizált, nem API-zabáló AI-kra. A CMS-ed nem generál géppel olvasható API-katalógust. Az auth réteg nem kezeli a bot-specifikus azonosítást. A tartalomcső nem ad ki igényre Markdownot.

Bezárni platformszintű döntés. Ha shared hostingon vagy, a providered valószínűleg nem ad Markdown-rendert vagy bot-authot. Ez hosting-döntés – és a legtöbb még nem hozta meg.

NameOcean-ügyfeleknek ez pont az, amit a Vibe Hosting megold: nem sima weboldal-parkoló, hanem agent-natív platform alapoktól.

Mit tegyél most azonnal?

Ha komolyan veszed az AI-t – és ha nem, már lemaradtál –, nézd meg a Cloudflare-scannerrel:

1. Van géppel olvasható API-d? Ha nincs, ez az első lépés.
2. Képes Markdownra a tartalom? Ez a hatékonyság-növelő.
3. Külön hitelesítesz ügynököket emberektől? Ez a biztonsági réteg.
4. Felfedezhetőek a képességeid doksi nélkül? Ez a terjesztési csatorna.

Nem kell mindent most. De kell egy terv. Mert 12 hónap múlva azok az ügynökök, amelyek megtalálnak, beintegrálódnak és simán tranzaktálnak veled, viszik el a nagy szeletet.

A bukó site-ok nem rosszak. Csak a múlt évtizedre vannak hangolva, nem a következőre.

A hosting-provider nézőpont

Ez az adat tüzet gyújt minden hosting-cég termékcsapatánál. Hatalmas piac. Aki az agent-readinesst defaulttá teszi, az viszi a következő web-infra hullám egy darabját.

Ha a hostod nem magyarázza el, hogyan készít fel az AI-ügynökökre, kérdezd meg, miért. A 4%, ami átmegy, nem szerencse – stratégia.

A web jövője nem a blokkolás. Hanem az, hogy az AI-munkafolyamatokba annyira beolvadsz, hogy defaultként válasszanak. A legtöbb oldal nincs kész. Te igen?