Ein DEV- oder Staging-Crawl ist ein Crawl der Entwicklungs- oder Testumgebung einer Website, bevor die neue Version live geht. Technische Probleme lassen sich so finden, solange sie noch keine Besucher erreichen. Der Begriff stammt aus der SEO-Praxis.
Was geprüft wird
Aus Migrations-Checklisten ergeben sich typische Prüfpunkte:
- robots.txt,
noindex-Angaben und Passwortschutz der Testumgebung - Canonical-Tags, die nicht auf die Staging-Domain zeigen dürfen
- Weiterleitungen, XML-Sitemaps und strukturierte Daten
- Rendering von JavaScript-Inhalten
- Core Web Vitals
Sitebulb nennt als Pre-Launch-Checks außerdem das Entfernen von noindex und Passwortschutz. Siteimprove führt eine Staging-Prüfung als erste Validierungsphase vor dem Livegang auf.
Schutz der Testumgebung
Ryte empfiehlt HTTP-Authentifizierung, damit Crawler die Umgebung nicht erreichen. Google beschreibt robots.txt nicht als Mechanismus, um Seiten aus der Suche herauszuhalten, und nennt stattdessen Passwortschutz, noindex oder Entfernen der Seite. Ryte zeigt am Beispiel einer Suche, dass zahlreiche Staging-Subdomains im Index stehen. Ein Crawler, der die geschützte Umgebung prüft, braucht dann Zugangsdaten oder eine freigegebene IP-Adresse (Einschätzung).
Beispiel
Auf der Staging-Domain steht in jeder Seite:
<link rel="canonical" href="https://staging.example.com/produkt/">
Der Crawl zeigt, dass alle Canonicals auf Staging zeigen. Wird das vor dem Livegang korrigiert, gelangt die Angabe nicht auf die Live-Seite.
Mehr dazu im searchVIU-Blog
Quellen
- Einführung in robots.txt – Google Search Centraldevelopers.google.com
- Technical SEO during migrations – Siteimprovesiteimprove.com
- 6 technical SEO mistakes in ecommerce website migration – Ryte/Onely (März 2022)en.ryte.com
- Website Migrations & Redirect Mapping – Sitebulbsitebulb.com
Stand: