bingbot
Bingbot je crawler, který Microsoft používá k tvorbě vyhledávacího indexu Bingu. Jeho zablokováním odstraníte své stránky z výsledků vyhledávání Bingu. Microsoft zveřejňuje seznam svých IP adres a metodu přes DNS, jak potvrdit, že požadavek vydávající se za Bingbot skutečně pochází z Bingu, takže ho firewall může bezpečně povolit.
Co dělá
Bingbot prochází web pro vyhledávání Bing. Jeho user agent obsahuje token bingbot; Microsoft ho v roce 2022 převedl na průběžně aktualizovaný formát, v němž verze Chrome sleduje aktuální vydání Microsoft Edge, a oznámil, že starší krátký řetězec bude postupně vyřazen.
Řetězce user agentů lze padělat, proto Microsoft doporučuje ověřovat původ požadavku, a ne spoléhat na token bingbot. Zablokování Bingbotu znamená, že Bing nemůže vaše stránky procházet pro svůj vyhledávací index.
V naší studii z období 2026-11 ho zablokovalo 3.3% oblíbených webů s robots.txt. →
Token pro robots.txt
bingbot
Řetězec user agenta
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/W.X.Y.Z Safari/537.36
Jak ho povolit
User-agent: bingbot
Allow: /
Jak ho zablokovat
User-agent: bingbot
Disallow: /
Jak ověřit skutečné návštěvy
Microsoft doporučuje dvoukrokovou kontrolu přes DNS: proveďte zpětné vyhledání DNS pro IP odesílatele a ověřte, že název hostitele končí na search.msn.com, poté proveďte přímé vyhledání tohoto názvu hostitele a ověřte, že vrátí stejnou IP. Microsoft také zveřejňuje seznam IP adres Bingbotu a v Bing Webmaster Tools nabízí nástroj Verify Bingbot.