Content Signals
Content Signals: Cloudflare gibt Publishern mehr Kontrolle über ihre Inhalte
Kostenlose Kontrolle über die Nutzung durch KI
Cloudflare, Inc. (NYSE: NET), führender Anbieter im Bereich Connectivity Cloud, bringt heute ein neues Werkzeug an den Start, das Website-Betreiberinnen und -Betreibern, Publishern und Verlagen mehr Kontrolle über ihre Inhalte verschafft. Mit der neuen „Content Signals“-Richtlinie können sie ihre robots.txt-Datei – eine einfache Textdatei, die Webcrawlern zeigt, welche Bereiche einer Website zugänglich sind – noch einfacher anpassen. Damit lässt sich jetzt auch klar angeben, wie Inhalte weiterverwendet werden dürfen, etwa ob sie für KI-Überblicke oder KI-Training freigegeben sind oder nicht.
Mit der neuen „Content Signals“-Richtlinie können Websites, Verlage und Publisher kostenlos festlegen, wie KI-Unternehmen ihre Inhalte nutzen dürfen
Das Internet verändert sich: Früher führte eine Suche meist zu einer Liste von Links, heute beantworten KI-gestützte Systeme Fragen oft direkt – ohne dass die Nutzerinnen und Nutzer die ursprüngliche Website besuchen. Für Publisher, Verlage und Creator bedeutet das: weniger Reichweite, weniger Einnahmen. Gleichzeitig sammeln KI-Crawler große Datenmengen von Webseiten, ohne dass deren Eigentümerinnen und Eigentümer genau steuern können, wie diese Daten später verwendet werden. Zwar können robots.txt-Dateien den Zugriff bestimmter Crawler einschränken, aber nicht, was danach mit den Daten geschieht. Genau hier setzt „Content Signals“ an – mit einer klaren, maschinenlesbaren Sprache für Nutzungsregeln.
„Das Internet darf nicht tatenlos zusehen, während Inhalte von Urheberinnen und Urhebern unkontrolliert von anderen Unternehmen kommerziell genutzt werden“, sagt Matthew Prince, Mitgründer und CEO von Cloudflare . „Wenn das Netz auch in Zukunft offen und lebendig bleiben soll, brauchen Website-Betreiberinnen und -Betreiber einfache Mittel, um deutlich zu machen, wie ihre Inhalte verwendet werden dürfen. robots.txt ist ein unterschätztes Werkzeug, und mit ‚Content Signals‘ helfen wir dabei, diese Datei zu stärken und KI-Unternehmen klare Grenzen zu setzen.“
Cloudflare ist überzeugt: Die Entscheidung über die kommerzielle Nutzung von Daten muss bei den Betreiberinnen und Betreibern selbst liegen – egal ob es sich um ein lokales Nachrichtenportal, ein KI-Start-up oder einen Online-Shop handelt. Schon jetzt nutzen über 3,8 Millionen Domains den robots.txt-Dienst von Cloudflare, um KI-Training auszuschließen. Mit der neuen Richtlinie lassen sich diese Einstellungen noch präziser formulieren.
Die wichtigsten Funktionen von „Content Signals“:
- Einfache Lesbarkeit: „Ja“ heißt erlaubt, „Nein“ heißt nicht erlaubt, kein Signal bedeutet: keine Präferenz.
- Klare Nutzungskategorien: Von Suche über KI-Eingabe bis hin zu KI-Training.
- Rechtliche Relevanz: Die angegebenen Vorlieben können rechtliche Wirkung entfalten.
Natürlich verhindert robots.txt kein Scraping an sich. Aber Cloudflare setzt darauf, dass durch klarere Regeln die Signale von Website-Inhaberinnen und -Inhabern stärker beachtet werden und Unternehmen Inhalte respektvoller behandeln. Ab sofort aktualisiert Cloudflare automatisch die robots.txt-Dateien für alle Kundinnen und Kunden, die diesen Dienst nutzen. Zusätzlich stellt Cloudflare Tools bereit, mit denen auch individuelle Regeln für Crawler erstellt werden können.
Unterstützung aus der Branche
- News/Media Alliance: „Cloudflare gibt Publishern und Verlagen die Kontrolle zurück – ein wichtiger Schritt, um auch in Zukunft qualitativ hochwertigen Journalismus zu sichern.“ – Danielle Coffey, President & CEO.
- Quora: „Wir begrüßen Cloudflares Führungsrolle und die Einführung klarer Protokolle zum Schutz von Inhalten.“ – Ricky Arai-Lopez, Head of Product.
- Reddit: „Klare Signale sind entscheidend, damit das Web ein Ort echter menschlicher Interaktion bleibt.“ – Chris Slowe, CTO.
- RSL Collective: „‚Content Signals‘ und der offene RSL-Standard geben Publishern nicht nur Kontrolle, sondern auch Möglichkeiten für faire Vergütung.“ – Eckart Walther, Mitgründer.
- Stack Overflow: „Cloudflare spielt eine Schlüsselrolle dabei, Content Creator im KI-Zeitalter zu schützen und zu stärken.“ – Prasanth Chandrasekar, CEO.
