Ngjitni një adresë IP nga log-et e serverit tuaj për të parë nëse ndodhet në gamat IP të publikuara zyrtarisht të një zvarritësi. Një kërkesë që e quan veten GPTBot ose PerplexityBot, por vjen nga një adresë tjetër, nuk është ai zvarritës, dhe mund ta bllokoni pa humbur dukshmëri në përgjigjet AI.
Cilët zvarritës i publikojnë adresat e tyre IP?
OpenAI, Perplexity, Google, Microsoft dhe Apple i publikojnë gamat IP të zvarritësve të tyre si skedarë JSON, që ne i lexojmë çdo ditë. Disa kompani të tjera AI nuk publikojnë gama; për to, DNS-ja e kundërt ose dokumentacioni i ofruesit është kontrolli i vetëm. Për të parë njëherësh çdo vizitë të zvarritësve AI në një log, ngarkojeni log-un në llogarinë tuaj AISeeWhy.
Si të përdorni kontrollin e IP-ve të zvarritësve AI
Ky tekst është përkthyer nga anglishtja me përkthim automatik.
Çfarë bën ky kontroll IP
Ngjitni një adresë IPv4 ose IPv6 nga log-et e serverit ose të firewall-it tuaj. Kontrolli e kërkon atë në diapazonet IP që publikojnë vetë operatorët e zvarritësve: OpenAI për GPTBot, OAI-SearchBot dhe ChatGPT-User, Perplexity për PerplexityBot dhe Perplexity-User, Google për Googlebot, Microsoft për Bingbot dhe Apple për Applebot. Ato lista të publikuara i lexojmë çdo ditë. Përgjigjja emërton çdo zvarritës diapazonet e të cilit përmbajnë adresën, ose thotë se asnjë nuk e përmban.
Si ta lexoni rezultatin
Në diapazonet e publikuara të një zvarritësi: kërkesa erdhi nga rrjeti i atij operatori. Bashkë me një user agent që përputhet, kjo është provë e fortë se ishte zvarritësi i vërtetë.
Në asnjë diapazon të publikuar: nëse kërkesa pretendonte të ishte një nga zvarritësit e listuar, nuk ishte. Dikush tjetër e përdori emrin, dhe mund ta bllokoni atë adresë pa humbur dukshmëri në përgjigjet e AI.
Krahasuar me: lista e zvarritësve diapazonet e të cilëve u krahasuan. Një zvarritës që nuk është në këtë listë nuk mund të konfirmohet as të përjashtohet këtu.
Pse kushdo mund të pretendojë se është GPTBot
Një user agent është një rresht teksti që dërgon klienti, dhe kushdo mund të shkruajë në të GPTBot ose Googlebot. Scraper-ët e bëjnë këtë për të kaluar filtrat e thjeshtë. Prandaj firewall-ët që shohin vetëm user agent-in mund të mashtrohen në të dy drejtimet: lënë të hyjnë zvarritës të rremë, ose një rregull i shkruar kundër një zvarritësi të rremë bllokon edhe të vërtetin. Krahasimi i adresës IP me listën e publikuar të operatorit është mënyra si i dalloni.
Për zvarritësit operatorët e të cilëve nuk publikojnë një diapazon që e lexojmë ne, përdorni dokumentacionin e vetë operatorit. Google, Microsoft dhe Apple mbështesin edhe një kontroll DNS: kërkoni emrin e hostit të adresës, kontrolloni që mbaron me domenin e operatorit, si googlebot.com, google.com, search.msn.com ose applebot.apple.com, pastaj kërkoni sërish atë emër hosti dhe konfirmoni që kthen të njëjtën adresë.
host 66.249.66.1
1.66.249.66.in-addr.arpa domain name pointer crawl-66-249-66-1.googlebot.com.
host crawl-66-249-66-1.googlebot.com
crawl-66-249-66-1.googlebot.com has address 66.249.66.1
Gabime të zakonshme
Bllokimi i një zvarritësi me emër pasi keni parë abuzim nga një i rremë. Bllokoni në vend të kësaj adresat abuzuese, përndryshe humbni edhe zvarritësin e vërtetë.
Lejimi i çdo kërkese, user agent-i i së cilës thotë GPTBot. Kombinoni user agent-in me diapazonet e publikuara në rregullin e firewall-it.
Kontrolli i adresës së një proxy-je. Pas një CDN ose balancuesi ngarkese, serveri juaj mund të regjistrojë proxy-n, jo vizitorin; përdorni header-in që mbart adresën e klientit.
Mbajtja e një kopjeje të vjetër të diapazoneve. Operatorët i ndryshojnë; rregullat e ndërtuara nga një listë disa muajshe mund të bllokojnë zvarritës të vërtetë.
Nga një adresë te i gjithë log-u
Ky kontroll përgjigjet për një adresë në një kohë. Në llogarinë tuaj AISeeWhy, kontrolli i log-ut të serverit në planet me pagesë lexon një log të plotë aksesi, numëron vizitat e çdo zvarritësi AI, i ndan zvarritësit e vërtetë nga mashtruesit sipas këtyre diapazoneve të publikuara dhe tregon si u është përgjigjur serveri juaj.
Pyetje të shpeshta
A shfaqet ClaudeBot në këtë kontroll?
Jo për momentin: kontrolli mbulon zvarritësit, skedarët e diapazoneve të publikuara të të cilëve i lexojmë, të renditur poshtë rezultatit. Për zvarritës të tjerë, ndiqni dokumentacionin e operatorit.
Një adresë është në diapazonin e Googlebot, por user agent-i thotë diçka tjetër. Çfarë do të thotë kjo?
Kërkesa erdhi nga rrjeti i Google. Google përdor disa zvarritës dhe marrës; user agent-i ju tregon cilin. Nuk ishte një palë e tretë që shtirej si Google.
A mund të kontrolloj shumë adresa njëkohësisht?
Jo me këtë mjet falas. Ngarkojeni log-un në llogarinë tuaj për të kontrolluar çdo vizitë në të.
A ruhet adresa që shkruaj?
Përdoret për t'iu përgjigjur kontrollit dhe nuk ruhet me kërkesën tuaj.