Die Crawling-Statistik ist ein Bericht in der Google Search Console, der die Abrufe des Googlebot auf einer Domain zusammenfasst. Er zeigt, wie viele Anfragen Google gestellt hat, wie schnell der Server geantwortet hat und mit welchen Statuscodes.
Was zeigt der Bericht?
Der Bericht liegt in den Einstellungen der Property und deckt die letzten 90 Tage ab. Er zeigt vier Kennzahlen: Crawling-Anfragen insgesamt, Gesamtgröße der Downloads, durchschnittliche Reaktionszeit und den Hoststatus für Verfügbarkeitsprobleme.
Die Anfragen lassen sich nach Antwortcode, Dateityp, Crawling-Zweck (Erkennung oder Aktualisierung) und Googlebot-Typ aufschlüsseln, zum Beispiel Smartphone, Desktop oder Bilder.
Grenzen
Der Bericht steht nur für Properties auf Stammebene zur Verfügung, also für Domain-Properties und URL-Präfix-Properties der Hauptdomain. Google richtet ihn an fortgeschrittene Nutzer und nennt ihn für Websites mit mehr als 1.000 Seiten sinnvoll. Nach Angabe von Google werden manche Anfragen möglicherweise nicht erfasst, die Zahlen können deshalb von Server-Logs abweichen. Bots anderer Anbieter erscheinen darin nicht.
Beispiel
Steigt der Anteil der 5xx-Antworten über mehrere Tage und die durchschnittliche Reaktionszeit wächst, deutet das auf Serverprobleme hin, die das Crawling bremsen können. Der Bericht liefert dann den Anlass, im Server-Log nachzusehen.
Quellen
- Bericht „Crawling-Statistik“ – Search Console-Hilfesupport.google.com
Stand: