Cloudflare, ein führender Anbieter von Internet-Infrastruktur, unternimmt einen wichtigen Schritt zum Schutz von Content-Erstellern. Das Unternehmen implementiert eine Standardeinstellung, die KI-Crawler daran hindert, ohne ausdrückliche Genehmigung oder Vergütung auf Website-Inhalte zuzugreifen. Diese Maßnahme zielt darauf ab, Content-Erstellern mehr Kontrolle darüber zu geben, wie ihre Arbeit von KI-Unternehmen genutzt wird.
Ab dem 1. Juli 2025 werden neue Webdomains, die die Dienste von Cloudflare nutzen, aufgefordert, über den Zugriff von KI-Crawlern zu entscheiden. Dies verlagert die Verantwortung auf KI-Unternehmen, die den Zugriff anfordern und den Zweck ihres Crawlers erläutern müssen. Zu diesen Zwecken gehören Training, Inferenz oder Suchfunktionen.
Die Initiative von Cloudflare reagiert auf Bedenken hinsichtlich des unbegrenzten Scrapings von Inhalten durch KI-Crawler. Diese Praxis hat Content-Ersteller um Einnahmen und Anerkennung gebracht. Durch das Blockieren unbefugten Scrapings will Cloudflare die Zukunft des Internets sichern. Dies ist besonders relevant im Kontext der EU-Datenschutz-Grundverordnung (DSGVO) und der zunehmenden Bedeutung des Datenschutzes.
Zusätzlich zum Blockieren von Crawlern hat Cloudflare ein "Pay Per Crawl"-Programm eingeführt. Mit dieser Funktion können Content-Ersteller einen Preis für KI-Unternehmen festlegen, die ihre Inhalte verwenden, beispielsweise für das Training von Modellen und Retrieval-Augmented Generation. Das Programm befindet sich derzeit in der privaten Beta-Phase.
Große Verlage, darunter Gannett und The Associated Press, unterstützen die Initiative von Cloudflare. Sie sehen dies als einen Schritt zu einem fairen Wertausgleich, der Urheber schützt und Qualitätsjournalismus fördert. Dies ist von besonderer Bedeutung in einer Zeit, in der die Verbreitung von Falschinformationen zunimmt.
Cloudflares Schritt stellt eine bedeutende Veränderung für Content-Ersteller im KI-Zeitalter dar. Durch die Bereitstellung von Tools zum Blockieren und zur Berechnung von Gebühren für den Inhaltszugriff setzt Cloudflare einen neuen Standard für die Achtung des geistigen Eigentums im Internet. Dies unterstreicht die Bedeutung von Transparenz und Fairness in der digitalen Wirtschaft.