Cloudflare vyhlásil válku AI botům. Majitelé webů teď mají větší kontrolu nad svým obsahem

Umělá inteligence potřebuje ke svému fungování obrovská množství dat. K jejich shromažďování slouží tzv. AI boti neboli crawlery – programy, které automaticky procházejí webové stránky a ukládají si z nich texty, obrázky či další obsah. Právě proti těmto botům se nyní razantně postavila společnost Cloudflare, která chrání provoz více než 16 % globálního internetového provozu.

Od července dostává každý web využívající služby Cloudflare možnost rozhodnout, zda chce technologickým firmám povolit přístup ke svému obsahu. Pokud si to majitel webu nepřeje, Cloudflare automaticky přístup AI botům zablokuje – a to na desítkách milionů stránek.

Cloudflare tak přináší nástroj, který dává tvůrcům obsahu zpět kontrolu nad tím, kdo jejich materiály využívá. Společnosti jako OpenAI nebo Google, které své jazykové modely trénují právě na těchto datech, budou muset respektovat nově nastavená pravidla.

Tvůrci mohou za obsah požadovat poplatek

Novinkou je také program Pay Per Crawl, tedy „platba za prohlédnutí“. Díky němu mohou provozovatelé webů nastavit cenu, za kterou umožní AI systémům přístup ke svému obsahu. Zájemci z řad technologických firem si mohou tyto podmínky prohlédnout a rozhodnout, zda na ně přistoupí, nebo se přístupu vzdají. Zatím jde o pilotní projekt dostupný pro vybrané velké vydavatele a tvůrce.

„Chceme, aby firmy pracující s umělou inteligencí měly přístup ke kvalitnímu obsahu, ale zároveň ho využívaly férově – tedy s povolením autorů a odpovídající odměnou,“ uvedla firma Cloudflare ve svém prohlášení. Dříve přiváděl internet návštěvníky přímo na původní zdroje – tvůrci tak získávali čtenáře a příjmy z reklamy. Dnes však AI boti často stáhnou obsah bez nutnosti návštěvy webu, což připravuje vydavatele o návštěvnost i výdělky.

Generální ředitel vydavatelství Condé Nast (mj. tituly jako Vogue či The New Yorker) Roger Lynch označil nový krok Cloudflare za zásadní. „Jde o důležitý milník k tomu, abychom obnovili férové prostředí na internetu. Chráníme tím kvalitní žurnalistiku a nutíme AI firmy, aby za využití obsahu platily,“ uvedl.

Další krok v ochraně proti AI crawlerům

Cloudflare už dříve umožňoval webům blokovat boty pomocí tzv. robots.txt – šlo však o dobrovolné řešení, které mnoho crawlerů nerespektovalo. Od roku 2023 firma nabídla i možnost plošné blokace AI botů jedním kliknutím. Nyní jde ještě dál: tato ochrana je nově automaticky zapnutá pro všechny weby využívající její služby.

Cloudflare tím vytváří nový standard ochrany obsahu v době rozmachu umělé inteligence a dává vydavatelům i tvůrcům větší možnosti, jak chránit svou práci a případně na ní i vydělávat.

Zdroj foto: