Verificare IP pentru crawlere AI
Lipește o adresă IP din jurnalele serverului tău ca să vezi dacă se află în intervalele IP publicate oficial ale unui crawler. O cerere care se declară GPTBot sau PerplexityBot, dar vine de la altă adresă, nu este acel crawler și o poți bloca fără să pierzi vizibilitatea în răspunsurile AI.
Ce crawlere își publică adresele IP?
OpenAI, Perplexity, Google, Microsoft și Apple publică intervalele IP ale crawlerelor lor ca fișiere JSON, pe care le citim zilnic. Alte companii AI nu publică intervale; pentru acestea, DNS-ul invers sau documentația furnizorului sunt singura verificare. Ca să vezi dintr-odată toate vizitele crawlerelor AI dintr-un jurnal, încarcă jurnalul în contul tău AISeeWhy.