Inhalte für KI sperren: Cloudflare führt Content Signals Policy ein

Cloudflare, ein führender Anbieter von Internet-Sicherheitsdiensten und Content Delivery Networks, hat eine neue Funktion namens Content Signals Policy angekündigt. Mit dieser kannst du über die robots.txt signalisieren, ob deine Inhalte in den KI-Übersichten von Google verwendet werden dürfen. So können Website-Betreiber bestimmte Inhalte für KI-Systeme sperren.

Dieser Schritt soll Publishern mehr Kontrolle darüber geben, wie Crawler und Bots ihre Daten verwenden. Cloudflare geht damit über herkömmliche Richtlinien hinaus, die lediglich das Crawling und die Indizierung regeln.

Das große ABER: Google hat sich (noch) nicht dazu bereit erklärt, diese Anweisungen zu befolgen. Laut Cloudflare-CEO Matthew Prince wurde Google über die Content Signals Policy informiert, habe sich jedoch noch nicht dazu geäußert, ob man die neuen Signale berücksichtigen werde. robots.txt-Richtlinien sind rechtlich nicht verpflichtend, und Cloudflare räumte ein, dass einige Unternehmen sie möglicherweise ignorieren würden.

So funktionert's!

Die Richtlinie fügt drei neue maschinenlesbare Anweisungen zu robots.txt hinzu:

• search: Berechtigung zum Erstellen eines Suchindexes und Anzeigen von Links/Snippets (traditionelle Suche).
• ai-input: Berechtigung zur Verwendung von Inhalten als Eingabe für KI-generierte Antworten.
• ai-train: Berechtigung zur Verwendung von Inhalten für das Training von KI-Modellen.

Was bedeutet das für SEO?

Für SEO-Experten und Website-Betreiber hat die Einführung der Content Signals Policy von Cloudflare potenziell Auswirkungen auf die Indexierung und Auffindbarkeit von Website-Inhalten. Indem bestimmte Inhalte vor KI-Systemen geschützt werden, könnten diese Inhalte möglicherweise nicht in Suchergebnissen erscheinen oder langsamer indexiert werden.

Es ist daher ratsam, die Content Signals Policy von Cloudflare sorgfältig zu prüfen und sicherzustellen, dass wichtige Inhalte für Suchmaschinen zugänglich bleiben. Dies kann durch die Konfiguration von Ausnahmen oder spezifischen Regeln in der Content Signals Policy erreicht werden.

Unsere Einschätzung

Wir bezweifeln, dass Google und weitere KI-Unternehmen sich daran halten werden. Trotzdem bietet die Content Signals Policy von Cloudflare immerhin eine Möglichkeit, sich gegen AI Overviews "zu wehren" – eine Kontrolle, die man zuvor nicht hatte. Das ist wichtig, weil KI-Antworten häufig den Traffic beeinträchtigen und im Gegenzug meist nur wenig Mehrwert bieten.

Quellen

businesswire.com

cloudflare.net

Manu Magno

Manu Magno

Manu ist seit Oktober 2020 Teil des Backlinked-Teams und leitet seit Oktober 2022 die Redaktion. Der gelernte Technik-Journalist hat in den vergangenen Jahren vor allem Erfahrung in den Bereichen (Automobil)Versicherung, Buchhaltung/Inkasso und Jobvermittlung gesammelt. Er schreibt für User, nicht für Suchmaschinen: Seine SEO-Texte haben immer den Mehrwert der Nutzer im Fokus.