OAI-SearchBot
OAI-SearchBot is de zoekcrawler van OpenAI. Hij toont websites in de zoekfuncties van ChatGPT. OpenAI zegt dat sites die OAI-SearchBot uitsluiten niet in de zoekantwoorden van ChatGPT verschijnen, al kunnen ze nog wel als navigatielink worden getoond. Wil je dat ChatGPT je pagina's citeert, sta hem dan toe.
Wat de crawler doet
OpenAI gebruikt OAI-SearchBot om websites te tonen in zoekresultaten in de zoekfuncties van ChatGPT. Het is niet de trainingscrawler: modeltraining wordt apart via GPTBot geregeld.
OpenAI zegt dat sites die OAI-SearchBot hebben uitgesloten niet in de zoekantwoorden van ChatGPT verschijnen, al kunnen ze nog wel als navigatielink worden getoond. Het kan ongeveer 24 uur duren voordat de systemen van OpenAI een robots.txt-wijziging verwerkt hebben.
In ons onderzoek van 2026-11 blokkeerde 11.2% van de populaire sites met een robots.txt deze crawler. →
robots.txt-token
OAI-SearchBot
User-agentstring
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbotZo sta je hem toe
User-agent: OAI-SearchBot
Allow: /Zo blokkeer je hem
User-agent: OAI-SearchBot
Disallow: /Zo verifieer je echte bezoeken
OpenAI publiceert de IP-bereiken die deze agent gebruikt als JSON-bestand. Vergelijk het bron-IP van het verzoek met die bereiken; een verzoek dat OAI-SearchBot noemt maar van een ander adres komt, is niet van OpenAI. OpenAI merkt op dat het versienummer in de user agent kan veranderen, dus match op het OAI-SearchBot-token in plaats van op de volledige string.
Controleer of je site hem toelaat →
De OpenAI-crawlers uitgelegd: GPTBot, OAI-SearchBot en ChatGPT-User →