Перевірка IP ШІ-краулерів
Вставте IP-адресу з журналів сервера, щоб побачити, чи входить вона до офіційно опублікованих діапазонів IP краулера. Запит, що називає себе GPTBot чи PerplexityBot, але надходить з іншої адреси, не є цим краулером, і ви можете заблокувати його, не втрачаючи видимості у відповідях ШІ.
Які краулери публікують свої IP-адреси?
OpenAI, Perplexity, Google, Microsoft і Apple публікують діапазони IP своїх краулерів як файли JSON, які ми читаємо щодня. Деякі інші ШІ-компанії діапазони не публікують; для них єдина перевірка — зворотний DNS або документація вендора. Щоб побачити всі візити ШІ-краулерів у журналі одразу, завантажте журнал у свій обліковий запис AISeeWhy.