# Bösartige Bots (Bad Bots)

Kategorie: [Crawling & Indexierung](https://seo-geo-glossary.com/de/glossar/kategorie/crawling-indexierung/) › [Crawler & Bots](https://seo-geo-glossary.com/de/glossar/kategorie/crawling-indexierung/crawler-bots/) · Auch genannt: Bad Bots, Rogue Bots, böswillige Bots

**Bad Bots** (auch Rogue Bots) sind automatische Programme, die eine Website gegen den Willen des Betreibers aufrufen oder deren Regeln ignorieren. Im SEO-Alltag fallen sie in Logfiles und Crawl-Statistiken auf, weil sie Serverlast erzeugen und die Zahlen verfälschen.

## Woran erkennt man Bad Bots?

Zu den bekannten Missbrauchsarten zählt das OWASP-Projekt zu automatisierten Bedrohungen unter anderem Scraping, Credential Stuffing und Scalping. Dabei wird legitime Funktionalität einer Website massenhaft automatisiert genutzt.

Viele Bad Bots geben sich als bekannter Crawler aus und tragen den User-Agent von Googlebot oder Bingbot. Google beschreibt deshalb, wie sich echte Googlebot-Anfragen prüfen lassen. Dazu dient ein umgekehrter DNS-Lookup der IP-Adresse mit anschließendem Vorwärts-Lookup. Alternativ lässt sich die IP gegen die von Google veröffentlichten IP-Bereiche abgleichen, für Googlebot steht dafür die Datei `common-crawlers.json` bereit. Der User-Agent allein beweist nichts.

Die robots.txt hält Bad Bots nicht auf. RFC 9309 hält fest: „These rules are not a form of access authorization.“ Crawler sollen die Regeln befolgen, technisch erzwungen werden sie nicht. Wer Zugriff einschränken will, braucht Maßnahmen auf Server- oder Anwendungsebene, etwa Rate Limiting, Authentifizierung oder ein Bot-Management.

## Beispiel

Im Logfile erscheinen 40.000 Anfragen pro Stunde mit dem User-Agent `Googlebot/2.1`. Der Reverse-DNS-Eintrag der IP endet nicht auf `googlebot.com`, die IP fehlt auch in Googles veröffentlichten IP-Bereichen. Es handelt sich um einen gefälschten Googlebot, der sich ohne weiteres ausschließen lässt. IP-Adressen in Logfiles können personenbezogene Daten sein (EuGH, Urteil vom 19.10.2016, C-582/14, Breyer).

## Häufige Fehler

- **Dem User-Agent vertrauen.** Der User-Agent lässt sich frei setzen. Google verweist für den Fall, dass sich jemand fälschlich als Google ausgibt, auf die Prüfung per Reverse-DNS und auf die veröffentlichten IP-Bereiche.
- **Die robots.txt als Schutz einsetzen.** RFC 9309 hält fest, dass die Regeln keine Zugriffsautorisierung sind.

## Häufige Fragen

**Was sind Bots im Internet?**
Programme, die Websites automatisch aufrufen. Suchmaschinen-Crawler sind erwünscht, andere Bots belasten Server oder greifen Inhalte ab.

**Welche Bots gibt es?**
Meist erwünscht sind Suchmaschinen-Crawler, Monitoring-Bots, die die Erreichbarkeit einer Website prüfen, und Crawler von Preisvergleichsportalen. Unerwünscht sind Bots für Scraping, Klickbetrug, Kontoübernahmen oder Überlastungsangriffe (DDoS). Die Grenze zieht jeder Betreiber selbst.

**Sind Bots erlaubt?**
Welche Bots eine Website zulässt, legt der Betreiber fest, etwa in der robots.txt und in den Nutzungsbedingungen. Laut RFC 9309 sind robots.txt-Regeln keine Zugangskontrolle.

Keine Rechtsberatung.

## Verwandte Begriffe

- [Bot-Traffic](https://seo-geo-glossary.com/de/glossar/bot-traffic/index.md)
- [Bot-Management](https://seo-geo-glossary.com/de/glossar/bot-management/index.md)
- [Fake-Googlebot](https://seo-geo-glossary.com/de/glossar/fake-googlebot/index.md)
- [Bot-Verifizierung](https://seo-geo-glossary.com/de/glossar/bot-verifizierung/index.md)
- [KI-Bots blockieren](https://seo-geo-glossary.com/de/glossar/ki-bots-blockieren/index.md)
- [Web Bot Auth (signierte Bots)](https://seo-geo-glossary.com/de/glossar/web-bot-auth/index.md)
- [Robots Exclusion Protocol](https://seo-geo-glossary.com/de/glossar/robots-exclusion-protocol/index.md)

## Quellen

- [Googlebot-Anfragen überprüfen – Google Search Central](https://developers.google.com/crawling/docs/crawlers-fetchers/verify-google-requests?hl=de)
- [RFC 9309: Robots Exclusion Protocol](https://www.rfc-editor.org/rfc/rfc9309.html)
- [OWASP Automated Threats to Web Applications](https://owasp.org/www-project-automated-threats-to-web-applications/)
- [EuGH, Urteil vom 19.10.2016, C-582/14 (Breyer) – EUR-Lex](https://eur-lex.europa.eu/legal-content/DE/TXT/?uri=CELEX:62014CJ0582)

---

Stand: 8. Oktober 2026
URL: https://seo-geo-glossary.com/de/glossar/boesartige-bots/