bingbot
Bingbot is de crawler die Microsoft gebruikt om de zoekindex van Bing op te bouwen. Blokkeren haalt je pagina's uit de zoekresultaten van Bing. Microsoft publiceert een IP-lijst en een DNS-methode om te bevestigen dat een verzoek dat zich als Bingbot voordoet echt van Bing komt, zodat een firewall hem veilig kan toelaten.
Wat de crawler doet
Bingbot crawlt het web voor Bing-zoeken. Zijn user agent bevat het token bingbot; Microsoft stapte in 2022 over op een evergreen-formaat, waarin de Chrome-versie de huidige Microsoft Edge-release volgt, en kondigde aan dat de oudere korte string zou worden uitgefaseerd.
User-agentstrings kunnen worden vervalst, dus Microsoft raadt aan de bron van een verzoek te bevestigen in plaats van op het bingbot-token te vertrouwen. Bingbot blokkeren betekent dat Bing je pagina's niet kan crawlen voor zijn zoekindex.
In ons onderzoek van 2026-11 blokkeerde 3.3% van de populaire sites met een robots.txt deze crawler. →
robots.txt-token
bingbot
User-agentstring
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/W.X.Y.Z Safari/537.36
Zo sta je hem toe
User-agent: bingbot
Allow: /
Zo blokkeer je hem
User-agent: bingbot
Disallow: /
Zo verifieer je echte bezoeken
Microsoft raadt een DNS-controle in twee stappen aan: doe een reverse DNS-lookup op het IP van het verzoek en controleer of de hostnaam eindigt op search.msn.com, doe daarna een forward lookup op die hostnaam en controleer of die hetzelfde IP teruggeeft. Microsoft publiceert ook een lijst met Bingbot-IP-adressen en biedt een tool Verify Bingbot in Bing Webmaster Tools.