Content Signals sind Einträge in der robots.txt, mit denen eine Website angibt, wofür Crawler ihre Inhalte verwenden dürfen. Cloudflare hat die Policy am 24. September 2025 vorgestellt.
Welche Signale gibt es?
Es gibt drei Signale, die jeweils auf yes oder no stehen können:
searcherlaubt den Aufbau eines Suchindex und Suchergebnisse mit Links und Auszügen, ausdrücklich ohne KI-generierte Zusammenfassungen.ai-inputbetrifft die Nutzung von Inhalten als Eingabe für KI-Modelle, etwa für Antworten in Echtzeit.ai-trainbetrifft das Training oder Feintuning von KI-Modellen.
Wie verbindlich sind sie?
Die Signale drücken eine Präferenz aus. Cloudflare beschreibt die robots.txt-Befolgung als freiwillig, ein technischer Schutz entsteht dadurch nicht. Dafür bietet Cloudflare Regeln auf Netzwerkebene an. Cloudflare nennt außerdem eine IETF-Arbeitsgruppe, die an Standards für KI-Präferenzen arbeitet.
Für Websites mit dem von Cloudflare verwalteten robots.txt nennt der Blogbeitrag die Standardwerte search=yes, ai-train=no, die Cloudflare-Doku die Standardzeile search=yes, ai-train=no, use=reference.
Beispiel
User-Agent: *
Content-Signal: search=yes, ai-train=no
Allow: /
Die Website erlaubt damit die klassische Suche und lehnt das Training ab. Zu ai-input macht sie keine Angabe.
Mehr dazu im searchVIU-Blog
Quellen
- Giving users choice with Cloudflare's new Content Signals Policy – Cloudflare Blog (24.09.2025)blog.cloudflare.com
- robots.txt and Content Signals – Cloudflare Docsdevelopers.cloudflare.com
Stand: