Տեղադրեք IP հասցե ձեր սերվերի լոգերից՝ տեսնելու, թե արդյոք այն գտնվում է ռոբոտի պաշտոնապես հրապարակված IP տիրույթներում։ Հարցումը, որն իրեն անվանում է GPTBot կամ PerplexityBot, բայց գալիս է այլ հասցեից, այդ ռոբոտը չէ, և դուք կարող եք արգելափակել այն՝ առանց AI պատասխաններում տեսանելիությունը կորցնելու։
Ո՞ր ռոբոտներն են հրապարակում իրենց IP հասցեները
OpenAI-ը, Perplexity-ն, Google-ը, Microsoft-ը և Apple-ը հրապարակում են իրենց ռոբոտների IP տիրույթները JSON ֆայլերի տեսքով, որոնք մենք կարդում ենք ամեն օր։ Որոշ այլ AI ընկերություններ տիրույթներ չեն հրապարակում. դրանց համար միակ ստուգումը reverse DNS-ն է կամ մատակարարի փաստաթղթերը։ Լոգում AI ռոբոտների բոլոր այցերը միանգամից տեսնելու համար վերբեռնեք լոգը ձեր AISeeWhy հաշվում։
Այս տեքստը անգլերենից թարգմանվել է մեքենայական թարգմանությամբ։
Ինչ է անում այս IP ստուգումը
Տեղադրեք մեկ IPv4 կամ IPv6 հասցե ձեր սերվերի կամ ֆայրվոլի լոգերից։ Ստուգումը այն փնտրում է IP տիրույթներում, որոնք ռոբոտների օպերատորներն իրենք են հրապարակում. OpenAI-ը GPTBot-ի, OAI-SearchBot-ի և ChatGPT-User-ի համար, Perplexity-ն PerplexityBot-ի և Perplexity-User-ի համար, Google-ը Googlebot-ի համար, Microsoft-ը Bingbot-ի համար և Apple-ը Applebot-ի համար։ Մենք ամեն օր կարդում ենք այդ հրապարակված ցանկերը։ Պատասխանը նշում է բոլոր այն ռոբոտներին, որոնց տիրույթները պարունակում են հասցեն, կամ ասում է, որ ոչ մեկինը չի պարունակում։
Ինչպես կարդալ արդյունքը
Ռոբոտի հրապարակված տիրույթներում է. հարցումը եկել է այդ օպերատորի ցանցից։ Համապատասխան user agent-ի հետ միասին սա ուժեղ ապացույց է, որ դա իրական ռոբոտն էր։
Ոչ մի հրապարակված տիրույթում չէ. եթե հարցումը ներկայանում էր որպես թվարկված ռոբոտներից մեկը, դա այդպես չէր։ Անունն օգտագործել է ուրիշը, և կարող եք արգելափակել այդ հասցեն՝ առանց AI պատասխաններում տեսանելիությունը կորցնելու։
Ստուգվել է. ռոբոտների ցանկը, որոնց տիրույթները համեմատվել են։ Այս ցանկում չեղած ռոբոտը այստեղ չի կարող ո՛չ հաստատվել, ո՛չ բացառվել։
Ինչու կարող է ցանկացած ոք ներկայանալ որպես GPTBot
User agent-ը տեքստի տող է, որը ուղարկում է հաճախորդը, և ցանկացած ոք կարող է դրանում գրել GPTBot կամ Googlebot։ Սքրեյփերներն այդպես են անում՝ պարզ ֆիլտրերը շրջանցելու համար։ Ահա թե ինչու միայն user agent-ին նայող ֆայրվոլները կարող են խաբվել երկու ուղղությամբ էլ. նրանք ներս են թողնում կեղծ ռոբոտներին, կամ կեղծ ռոբոտի դեմ գրված կանոնն արգելափակում է նաև իրականին։ IP հասցեն օպերատորի հրապարակված ցանկի հետ համեմատելը հենց այն եղանակն է, որով դրանք տարբերում եք։
Այն ռոբոտների համար, որոնց օպերատորները չեն հրապարակում մեր կարդացած տիրույթ, օգտագործեք օպերատորի սեփական փաստաթղթերը։ Google-ը, Microsoft-ը և Apple-ը նաև աջակցում են DNS ստուգմանը. գտեք հասցեի հոսթի անունը, ստուգեք, որ այն ավարտվում է օպերատորի դոմենով, օրինակ՝ googlebot.com, google.com, search.msn.com կամ applebot.apple.com, ապա կրկին որոնեք այդ հոսթի անունը և հաստատեք, որ այն վերադարձնում է նույն հասցեն։
host 66.249.66.1
1.66.249.66.in-addr.arpa domain name pointer crawl-66-249-66-1.googlebot.com.
host crawl-66-249-66-1.googlebot.com
crawl-66-249-66-1.googlebot.com has address 66.249.66.1
Տարածված սխալներ
Ռոբոտին անունով արգելափակելը կեղծ ռոբոտի չարաշահումը տեսնելուց հետո։ Փոխարենը արգելափակեք չարաշահող հասցեները, այլապես կկորցնեք նաև իրական ռոբոտին։
Թույլատրել ցանկացած հարցում, որի user agent-ում գրված է GPTBot։ Ձեր ֆայրվոլի կանոնում user agent-ը համատեղեք հրապարակված տիրույթների հետ։
Պրոքսիի հասցեն ստուգելը։ CDN-ի կամ բեռնվածության հավասարակշռիչի հետևում ձեր սերվերը կարող է լոգում գրանցել պրոքսին, ոչ թե այցելուին. օգտագործեք այն header-ը, որը կրում է հաճախորդի հասցեն։
Տիրույթների հին պատճենը պահելը։ Օպերատորները փոխում են դրանք. ամիսներ առաջվա ցանկից կառուցված կանոնները կարող են արգելափակել իրական ռոբոտներին։
Մեկ հասցեից մինչև ամբողջ լոգը
Այս ստուգումը պատասխանում է մեկ անգամում մեկ հասցեի համար։ Ձեր AISeeWhy հաշվում վճարովի պլանների սերվերի լոգի ստուգումը կարդում է ամբողջ մուտքի լոգը, հաշվում է յուրաքանչյուր AI ռոբոտի այցերը, այդ հրապարակված տիրույթներով իրական ռոբոտներին առանձնացնում է խաբեբաներից և ցույց է տալիս, թե ինչպես է ձեր սերվերը պատասխանել նրանց։
Հաճախ տրվող հարցեր
ClaudeBot-ը հայտնվո՞ւմ է այս ստուգման մեջ
Ներկայումս՝ ոչ. ստուգումը ներառում է այն ռոբոտները, որոնց հրապարակված տիրույթների ֆայլերը մենք կարդում ենք, և դրանք թվարկված են արդյունքի տակ։ Այլ ռոբոտների համար հետևեք օպերատորի փաստաթղթերին։
Հասցեն Googlebot-ի տիրույթում է, բայց user agent-ն այլ բան է ասում։ Ի՞նչ է դա նշանակում
Հարցումը եկել է Google-ի ցանցից։ Google-ն ունի մի քանի ռոբոտ և բեռնիչ. user agent-ը ձեզ ասում է, թե որն է։ Դա երրորդ կողմ չէր, որը ներկայանում էր որպես Google։
Կարո՞ղ եմ միանգամից շատ հասցեներ ստուգել
Այս անվճար գործիքով՝ ոչ։ Վերբեռնեք լոգը ձեր հաշվում՝ դրանում եղած բոլոր այցերը ստուգելու համար։
Պահպանվո՞ւմ է իմ մուտքագրած հասցեն
Այն օգտագործվում է ստուգմանը պատասխանելու համար և չի պահպանվում ձեր հարցման հետ։