MistralAI-User ist der User-Agent, mit dem der KI-Assistent von Mistral AI Webseiten abruft, wenn ein Nutzer eine Frage stellt. Er holt einzelne Seiten auf Zuruf und läuft nicht als Dauer-Crawler.
Auf einen Blick
- Betreiber
- Mistral AI
- Zweck
- Nutzerabruf im Assistenten Vibe, laut Mistral kein Training
- robots.txt-Token
- MistralAI-User
- User-Agent
- Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; MistralAI-User/1.0; +https://docs.mistral.ai/robots)
- Beachtet robots.txt
- laut Mistral legt robots.txt fest, welche Seiten Nutzeranfragen abrufen dürfen
- IP-Liste
- ja, als JSON-Datei
Stand:
Wofür wird MistralAI-User genutzt?
Laut Mistral kann der Assistent Vibe bei einer Frage eine Webseite besuchen, um zu antworten, und in der Antwort einen Link zur Quelle angeben. Mistral schreibt, der Bot werde weder für automatisches Crawling noch für das Training generativer KI verwendet. Einige Drittquellen nennen statt Vibe den Assistenten Le Chat und halten eine Nutzung fürs Training für möglich. Der User-Agent lautet Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; MistralAI-User/1.0; +https://docs.mistral.ai/robots). Die IP-Adressen veröffentlicht Mistral als JSON-Datei.
| Bot | Betreiber | Zweck | robots.txt-Token | robots.txt laut Betreiber | IP-Liste veröffentlicht? |
|---|---|---|---|---|---|
| Google-Extended | Steuerung von Gemini-Training und Grounding (kein eigener Crawler) | Google-Extended | reines robots.txt-Token; abgerufen wird mit den bestehenden Google-Crawlern | entfällt (kein eigener User-Agent) | |
| GPTBot | OpenAI | Training | GPTBot | Sperre heißt laut OpenAI: Inhalte nicht für das Training von Basismodellen nutzen | ja (openai.) |
| OAI-SearchBot | OpenAI | Suche (ChatGPT) | OAI-SearchBot | gesperrte Websites erscheinen laut OpenAI nicht in ChatGPT-Suchantworten | ja (openai.) |
| ChatGPT-User | OpenAI | Nutzerabruf | ChatGPT-User | robots.txt-Regeln gelten laut OpenAI möglicherweise nicht (Abruf durch Nutzer ausgelöst) | ja (openai.) |
| ClaudeBot | Anthropic | Training | ClaudeBot | ja, laut Anthropic beachten seine Bots die robots.txt | ja (claude.) |
| Claude-SearchBot | Anthropic | Suche (Claude) | Claude-SearchBot | ja, laut Anthropic beachten seine Bots die robots.txt | ja (claude.) |
| PerplexityBot | Perplexity | Suche (Perplexity), laut Perplexity kein Training | PerplexityBot | über robots.txt steuerbar; eine ausdrückliche Befolgungszusage fehlt in der Doku | ja (perplexity.) |
| Applebot-Extended | Apple | Steuerung des KI-Trainings (crawlt laut Apple nicht) | Applebot-Extended | reines robots.txt-Token für bereits gecrawlte Inhalte | entfällt (kein eigener Crawler) |
| CCBot | Common Crawl | offenes Web-Archiv | CCBot | per robots.txt sperrbar laut Common Crawl | ja (index.) |
| Meta-ExternalAgent | Meta | Training von KI-Basismodellen, Produktverbesserung | meta-externalagent | per robots.txt sperrbar laut Meta | keine Angabe des Betreibers |
Auswahl von zehn KI-Bots großer Anbieter, keine vollständige Liste. Alle Werte stammen aus der Dokumentation des jeweiligen Betreibers (Stand 8. Oktober 2026). Ob ein Bot sich tatsächlich an die robots.txt hält, sagt die Tabelle nicht; sie gibt nur die Angaben der Betreiber wieder. Ein User-Agent lässt sich fälschen, echte Zugriffe erkennt man über die veröffentlichten IP-Listen oder Reverse-DNS. Quellen: OpenAI: Overview of OpenAI Crawlers; Anthropic: Does Anthropic crawl data from the web, and how can site owners block the crawler? (updated 2026-04-07); Perplexity: Perplexity Crawlers; Google: Google's common crawlers (last updated 2026-07-14); Google: Overview of Google crawlers and fetchers (last updated 2026-06-12); Google: Verifying Google crawlers and fetchers (IP range files); Apple: About Applebot (2026-09-04); Meta: Meta Web Crawlers; Common Crawl: CCBot. Stand: .
Wie lässt sich MistralAI-User steuern?
Mistral beschreibt, dass die robots.txt festlegt, auf welche Seiten solche Nutzeranfragen zugreifen dürfen. Ein Ausschluss kann dazu führen, dass die Seite in Antworten des Assistenten nicht mehr als Quelle erscheint (Einschätzung, keine Aussage von Mistral).
Beispiel
User-agent: MistralAI-User
Disallow: /preise/
Die Regel sperrt nur /preise/. Der Rest der Website bleibt abrufbar.
Häufige Fragen
Betrifft die Regel auch das Modelltraining? Mistral trennt den Bot nach eigener Aussage vom Training. Die Regel ändert daran nichts.
Quellen
- Mistral Crawlers (robots) – Mistral AI Docsdocs.mistral.ai
Stand: