A nyílt web csendben bezárul – és ez a fejleszőket nagyon is érinti
A láthatatlan szabályok, amelyek a webet nyitva tartják
Amikor a NameOceannál vagy bármely más szolgáltatónál építesz egy webes projektet, valószínűleg nem sokat gondolsz arra a háttérben működő infrastruktúrára, ami lehetővé teszi az automatizált hozzáférést. Használhatsz web crawlereket az oldalad tesztelésére, publikus API-kat kutakodásra, vagy eszközöket építhetsz, amelyek információkat gyűjtenek össze a netről. Mindez azért működik, mert az internet nyílt, semleges protokollokra épült — de ez az alap most olyan kihívásokkal néz szembe, amelyek mindenkinek aggasztónak kellene lennie, aki a webre épít.
Az IETF és a nyitottság filozófiája
Az Internet Engineering Task Force (IETF)largy el van dugva a háttérben, és technikai szabványokat határoz meg, amelyek irányítják, hogyan áramlik az adat az interneten. Évtizedek óta ezek a szabványok viszonylag semlegesek maradtak, a nyitottságot részesítve előnyben a bezárkózással szemben. Ez a szemlélet tette lehetővé az olyan innovációkat, amelyeket ma már természetesnek veszünk: keresőmotorokat, kutatási archívumokat, akadálymentességi eszközöket és rengeteg fejlesztői segédprogramot, amelyek automatizálják a publikusan elérhető információk lekérését.
A robots.txt protokoll tökéletes példa erre. Ez egy egyszerű szöveges fájl, amely megmondja az automatizált látogatóknak (például a keresőmotor crawlereinek), mely részeket érhetik el az oldalon. Sose úgy tervezték, hogy jogi eszköz legyen vagy bevételszerzési mechanizmus — ez egy udvariassági rendszer, ami kölcsönös bizalomra épül.
De ez most változni fog.
Javaslatok, amelyek átírhatják a webet
Az IETF-en belül több munkacsoport is olyan javaslatokat tervez, amelyek alapvetően megváltoztatnák, hogyan működik az automatizált webes hozzáférés. Bár a deklarált célok eltérőek — csökkenteni az AI botok okozta szerverterhelést, megvédeni a kiadók bevételeit, javítani a bot detektálást — az alapmechanizmus ugyanaz: több ellenőrzést adni a weboldal üzemeltetőinek afelett, hogy ki férhet hozzá programozottan a tartalmukhoz.
Az egyik javaslat közvetlenül az internet szabványokba ágyazná a „preferenciajelzéseket", kifejezve a kiadók óhajait az AI-val kapcsolatos crawlás ellen. Egy másik kriptográfiai bot autentikációs rendszereket engedélyezne, amelyek licencdíjakat követelhetnének az automatizált hozzáférésért. Az oldalak fehérlistára tehetnék az engedélyezett botokat, miközben minden mást blokkolnának — beleértve a kutatókat, archívusokat és startupokat, akik nem tudják megfizetni a hozzáférési díjakat.
Gondolj bele, mit jelent ez a következő projekted szempontjából. Szeretnél összehasonlító eszközt építeni az iparágodhoz? Minden oldallal tárgyalnod kell, amit crawlolni akarsz. Akadálymentességi réteget építesz a fogyatékkal élő felhasználóknak? Remélem, megkapod az engedélyt azoktól az oldalaktól. Kis biztonsági kutatócég vagy, amely sebezhetőségeket talál? Lehet, hogy licencre lesz szükséged, hogy egyáltalán megnézd a kódot.
Miért fontos ez a fejlesztőknek és startupoknak?
Itt az igazság: azok a cégek, amelyek a leghangosabban lobbiznak ezekért a változásokért, pontosan azok, akik a csökkent versenyből profitálnak. Ha a kisebb eszközök nem férhetnek hozzá szabadon a webhez, az előre megegyezett megállapodásokkal rendelkező nagy platformok automatikusan nyernek. A nyitott web mindig demokratizáló erő volt — lehetővé teszi, hogy kis csapatok olyan eszközöket építsenek, amelyek az érdemük alapján versenyezhetnek az óriásokkal, nem pedig hozzáférési jogok alapján.
A NameOceannál magunkat a nyitott web infrastruktúra-szolgáltatóinak tekintjük. Amikor domaint regisztrálsz vagy projektet deployolsz a Vibe Hostinggal, egy nyitottságra épülő ökoszisztémában veszel részt. Az IETF munkacsoportjaiból érkező javaslatok nem csak a ma használt eszközeidet fenyegetik — a még meg nem született innovációk következő generációját is.
Mit tehetünk?
Az EFF és más digitális jogokat védő szervezetek harcolnak ezek ellen a javaslatok ellen, és az erőfeszítéseik megállították néhány szélsőségesebb intézkedést. De az érdekérvényesítés önmagában nem elég. A fejlesztőknek és startupoknak meg kell érteniük, mi forog kockán, és hallatniuk kell a hangjukat, amikor a szabványosító testületek olyan változtatásokat fontolgatnak, amelyek befolyásolhatják, hogyan építünk a webre.
Támogasd a nyílt szabványokért küzdő szervezeteket. Vegyél részt az IETF konzultációin, amikor azok a webes hozzáférést érintik. Építsd a projektjeidet tudatában annak, mennyire függünk mindannyian ezekétől a láthatatlan protokolloktól.
A web ma azért nyitott, mert emberek küzdöttek érte. A következő csaták már javában zajlanak — és a fejlesztői közösségnek része kell legyen a beszélgetésnek.