Cloudflare, en av världens största aktörer inom internetsäkerhet och webbprestanda, har meddelat att de kommer att blockera otillåtna AI-bottar som samlar in data från webbplatser utan tillstånd.

Beslutet innebär ett tydligt ställningstagande i den växande konflikten mellan innehållsskapare och AI-företag som tränar sina modeller på stora mängder webbinnehåll – ofta utan att fråga först.

Enligt Cloudflare sker en stor del av dagens webbsökningar och datainsamling genom så kallade scrapers – automatiserade bottar som läser och kopierar innehåll från webbplatser. Bland dessa finns bottar som används för att träna generativ AI, såsom språkmodeller och bildgeneratorer. Cloudflare uppger att flera av dessa bottar är “hemliga”, döljer sin identitet och kringgår vanliga skydd, vilket bryter mot både tekniska och juridiska regler.

Verktyg

För att möta detta hot kommer Cloudflare att införa kraftfullare verktyg som automatiskt identifierar och blockerar misstänkta AI-bottar i realtid. Företaget kommer även att förenkla för webbplatsägare att själva stoppa AI-bottar via sin kontrollpanel.

Cloudflare menar att AI-företag måste spela med öppna kort och skaffa tillstånd innan de hämtar innehåll. “Webbens öppna struktur får inte utnyttjas för att stjäla innehåll från skapare utan samtycke”, säger Cloudflare i ett uttalande.

Åtgärden välkomnas av många utgivare, medier och kreatörer som allt oftare ser sina texter, bilder och databaser användas av AI-modeller – utan kompensation eller erkännande.

Källor:

• Cloudflare Blogg
• The Verge
• TechCrunch