IP-controle voor AI-crawlers
Plak een IP-adres uit je serverlogs om te zien of het in de officieel gepubliceerde IP-bereiken van een crawler valt. Een verzoek dat zich GPTBot of PerplexityBot noemt maar van een ander adres komt, is die crawler niet, en je kunt het blokkeren zonder zichtbaarheid in AI-antwoorden te verliezen.
Welke crawlers publiceren hun IP-adressen?
OpenAI, Perplexity, Google, Microsoft en Apple publiceren de IP-bereiken van hun crawlers als JSON-bestanden, die wij dagelijks inlezen. Sommige andere AI-bedrijven publiceren geen bereiken; voor hen zijn reverse DNS of de documentatie van de aanbieder de enige controle. Wil je alle bezoeken van AI-crawlers in een log in één keer zien, upload de log dan in je AISeeWhy-account.