English
KI-Bots steuern & auswerten

Crawl-to-Referral-Verhältnis

Auch genannt: Crawl-to-Refer-Ratio

Das Crawl-to-Referral-Verhältnis (auch Crawl-to-Refer-Ratio) gibt an, wie viele Seiten ein Dienst abruft, verglichen mit der Zahl der Besucher, die er zurück auf Websites schickt. Ein Wert von 1.000:1 bedeutet 1.000 Abrufe pro Besuch.

Auf einen Blick

Messwerte
HTML-Abrufe der Bots eines Dienstes geteilt durch HTML-Aufrufe mit Referer dieses Dienstes
Misst
wie viele Seiten ein Dienst abruft, verglichen mit den Besuchern, die er zurückschickt
Einheit
x:1 (Abrufe je Besuch)
Bewertung
kleiner Wert = mehr Besuche je Abruf; Apps ohne Referer können den Wert erhöhen
Datenquelle
Cloudflare-Netzwerkdaten (Radar)

Stand:

Wie wird es berechnet?

Cloudflare, auf dessen Daten die bekannten Zahlen beruhen, teilt die HTML-Anfragen der Bots eines Anbieters durch die HTML-Anfragen, bei denen der Referer-Header auf diesen Anbieter verweist. Verschiedene Bots eines Unternehmens, etwa für Training und für Nutzeranfragen, gehen in einen gemeinsamen Wert ein.

Welche Zahlen gibt es?

Für Januar und Juli 2025 nennt Cloudflare diese Werte:

  • Anthropic: 286.930:1 im Januar, rund 38.000:1 im Juli
  • OpenAI: 1.217:1 und 1.091:1
  • Perplexity: 55:1 und 195:1
  • Google: 3,8:1 und 5,4:1

Je kleiner die Zahl, desto mehr Besucher kommen pro Abruf zurück. Die Werte zeigen Größenordnungen und taugen nur zum groben Vergleich.

Grenzen

Apps senden häufig keinen Referer-Header. Cloudflare weist darauf hin, dass die Verhältnisse deshalb zu hoch ausfallen können. Wie stark, ist laut Cloudflare unklar.

Beispiel

Ein Dienst ruft in einem Monat 10.000 Seiten einer Website ab und schickt 10 Besucher zurück. Das Verhältnis beträgt 1.000:1.

Quellen

  1. The crawl-to-click gap: Cloudflare data on AI bots, training, and referrals – Cloudflare Blogblog.cloudflare.com
  2. AI Search crawl-to-refer ratio on Cloudflare Radar – Cloudflare Blogblog.cloudflare.com

Stand: