OAI-SearchBot
OAI-SearchBot ist der Suchcrawler von OpenAI. Er sorgt dafür, dass Websites in den Suchfunktionen von ChatGPT erscheinen. Laut OpenAI werden Websites, die OAI-SearchBot ausschließen, nicht in den Suchantworten von ChatGPT angezeigt, können aber weiterhin als Navigationslinks auftauchen. Wenn ChatGPT Ihre Seiten zitieren soll, lassen Sie ihn zu.
Was er tut
OpenAI nutzt OAI-SearchBot, um Websites in den Suchergebnissen der Suchfunktionen von ChatGPT anzuzeigen. Er ist nicht der Trainings-Crawler: Das Modelltraining wird separat über GPTBot gesteuert.
Laut OpenAI werden Websites, die OAI-SearchBot ausschließen, nicht in den Suchantworten von ChatGPT angezeigt, können aber weiterhin als Navigationslinks erscheinen. Nach einer Änderung der robots.txt kann es etwa 24 Stunden dauern, bis sich die Systeme von OpenAI angepasst haben.
In unserer Studie vom 2026-11 blockierten 11.2% der beliebten Websites mit einer robots.txt ihn. →
robots.txt-Token
OAI-SearchBot
User-Agent-String
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbot
So lassen Sie ihn zu
User-agent: OAI-SearchBot
Allow: /
So blockieren Sie ihn
User-agent: OAI-SearchBot
Disallow: /
So prüfen Sie echte Besuche
OpenAI veröffentlicht die IP-Bereiche, die dieser Agent verwendet, als JSON-Datei. Gleichen Sie die Quell-IP der Anfrage mit diesen Bereichen ab; eine Anfrage, die OAI-SearchBot nennt, aber von einer anderen Adresse kommt, stammt nicht von OpenAI. OpenAI weist darauf hin, dass sich die Versionsnummer im User-Agent ändern kann; vergleichen Sie daher das Token OAI-SearchBot und nicht den vollständigen String.
Prüfen, ob Ihre Website ihn hereinlässt →
Die OpenAI-Crawler erklärt: GPTBot, OAI-SearchBot und ChatGPT-User →