Když si postavíte web na NameOcean nebo jakémkoli hostingu, možná vůbec nepřemýšlíte o neviditelné infrastruktuře, která umožňuje automatizovaný přístup. Možná používáte web crawlers k testování webu, sbíráte data z veřejných API pro výzkum, nebo stavíte nástroje, které agregují informace z různých koutů internetu. To vše funguje díky tomu, že internet byl postaven na otevřených, neutrálních protokolech — ale tento základ je nyní ohrožen způsoby, které by měly znepokojovat každého, kdo na webu staví.

Nebviditelná pravidla, která drží web otevřený

Internet Engineering Task Force (IETF) působí z velké částí v pozadí a nastavuje technické standardy, které řídí, jak se data pohybují po internetu. Desítky let tyto standardy zůstávaly relativně neutrální a upřednostňovaly otevřenost před uzavíráním. Tato filozofie umožnila inovace, které dnes bereme jako samozřejmost: vyhledávače, výzkumné archivy, nástroje pro přístupnost a nespočet vývojářských utilit, které automatizují získávání veřejně dostupných informací.

Protokol robots.txt je perfektním příkladem. Tento jednoduchý textový soubor říká automatizovaným návštěvníkům (jako jsou crawlery vyhledávačů), které části webu mohou navštívit. Nikdy nebyl navržen jako právní nástroj nebo mechanismus pro monetizaci — je to systém založený na vzájemné důvěře.

To se chystá změnit.

Navrhované standardy, které by mohly přetvořit web

Několik pracovních skupin v IETF tlačí návrhy, které by zásadně změnily způsob, jakým funguje automatizovaný přístup k webu. Ačkoli deklarované cíle se liší — snížení zátěže serverů od AI botů, ochrana příjmů vydavatelů, zlepšení detekce botů — podkladový mechanismus je stejný: dát provozovatelům webů větší kontrolu nad tím, kdo může a nemůže programově přistupovat k jejich obsahu.

Jeden návrh by vložil „preferenční signály" přímo do internetových standardů a vyjadřoval přání vydavatelů proti AI crawlingu. Další by umožnil kryptografické autentizační systémy pro boty, které by mohly vyžadovat licenční poplatky za automatizovaný přístup. Stránky by mohly whitelistovat schválené boty a blokovat všechny ostatní — včetně výzkumníků, archivářů a startupů, které si nemohou dovolit poplatky za přístup.

Zamyslete se nad tím, co to znamená pro váš další projekt. Chcete postavit srovnávací nástroj pro váš obor? Budete muset vyjednávat s každým webem, který chcete procházet. Stavíte přístupovou vrstvu pro uživatele s postižením? Doufejte, že vám tyto weby udělí oprávnění. Provádíte bezpečnostní výzkum ve společnosti, která hledá zranitelnosti? Možná budete potřebovat licenci, abyste se vůbec mohli podívat na kód.

Proč je to důležité pro vývojáře a startupy

Zde je nepříjemná pravda: společnosti, které nejvíc tlačí na tyto změny, jsou stejné ty, které těží ze snížení konkurence. Pokud menší nástroje nemohou свободно přistupovat k webu, zavedené platformy s předem dojednanými smlouvami vyhrávají automaticky. Otevřený web byl vždy demokratizující silou — umožňuje malým týmům stavět nástroje, které soutěží se zavedenými hráči na základě kvality, ne přístupových práv.

Na NameOcean se vidíme jako poskytovatelé infrastruktury pro otevřený web. Když si u nás zaregistrujete domain nebo nasadíte projekt s naším hostingem, účastníte se ekosystému postaveného na otevřenosti. Návrhy vycházející z těchto pracovních skupin IETF neohrožují jen nástroje, které používáte dnes — ohrožují další generaci inovací, která ještě nebyla vymyšlena.

Co můžeme dělat?

EFF a další organizace hájící digitální práva proti těmto návrhům bojují a jejich úsilí zastavilo některá nejkrajnější opatření. Ale jenadvocacy nestačí. Vývojáři a startupy musí pochopit, co je v sázce, a nechat svůj hlas slyšet, když standardizační orgány zvažují změny, které by mohly ovlivnit, jak stavíme na webu.

Podporujte organizace, které prosazují otevřené standardy. Zapojte se do konzultací IETF, když se týkají webového přístupu. Stavte své projekty s vědomím toho, jak moc jsme všichni závislí na těchto neviditelných protokolech.

Web zůstává otevřený i dnes díky tomu, že ho lidé bojovali za to, aby takový zůstal. Další kolo bitev už probíhá — a vývojářská komunita musí být součástí konverzace.