AI ਕ੍ਰੌਲਰ IP ਜਾਂਚ

ਆਪਣੇ ਸਰਵਰ ਲੌਗਾਂ ਵਿੱਚੋਂ IP ਪਤਾ ਪੇਸਟ ਕਰੋ ਅਤੇ ਦੇਖੋ ਕਿ ਕੀ ਇਹ ਕਿਸੇ ਕ੍ਰੌਲਰ ਦੀਆਂ ਅਧਿਕਾਰਤ ਤੌਰ 'ਤੇ ਪ੍ਰਕਾਸ਼ਿਤ IP ਰੇਂਜਾਂ ਵਿੱਚ ਹੈ। ਜੋ ਬੇਨਤੀ ਖ਼ੁਦ ਨੂੰ GPTBot ਜਾਂ PerplexityBot ਦੱਸਦੀ ਹੈ ਪਰ ਕਿਸੇ ਹੋਰ ਪਤੇ ਤੋਂ ਆਉਂਦੀ ਹੈ, ਉਹ ਉਹ ਕ੍ਰੌਲਰ ਨਹੀਂ ਹੈ, ਅਤੇ ਤੁਸੀਂ AI ਜਵਾਬਾਂ ਵਿੱਚ ਦਿੱਖ ਗੁਆਏ ਬਿਨਾਂ ਉਸਨੂੰ ਬਲੌਕ ਕਰ ਸਕਦੇ ਹੋ।

ਕਿਹੜੇ ਕ੍ਰੌਲਰ ਆਪਣੇ IP ਪਤੇ ਪ੍ਰਕਾਸ਼ਿਤ ਕਰਦੇ ਹਨ?

OpenAI, Perplexity, Google, Microsoft ਅਤੇ Apple ਆਪਣੇ ਕ੍ਰੌਲਰਾਂ ਦੀਆਂ IP ਰੇਂਜਾਂ JSON ਫਾਈਲਾਂ ਵਜੋਂ ਪ੍ਰਕਾਸ਼ਿਤ ਕਰਦੇ ਹਨ, ਜਿਨ੍ਹਾਂ ਨੂੰ ਅਸੀਂ ਰੋਜ਼ਾਨਾ ਪੜ੍ਹਦੇ ਹਾਂ। ਕੁਝ ਹੋਰ AI ਕੰਪਨੀਆਂ ਰੇਂਜਾਂ ਪ੍ਰਕਾਸ਼ਿਤ ਨਹੀਂ ਕਰਦੀਆਂ; ਉਨ੍ਹਾਂ ਲਈ reverse DNS ਜਾਂ ਕੰਪਨੀ ਦੇ ਦਸਤਾਵੇਜ਼ ਹੀ ਜਾਂਚ ਦਾ ਇੱਕੋ ਰਾਹ ਹਨ। ਲੌਗ ਵਿੱਚ ਹਰ AI ਕ੍ਰੌਲਰ ਦੀ ਫੇਰੀ ਇੱਕੋ ਵਾਰ ਦੇਖਣ ਲਈ, ਆਪਣੇ AISeeWhy ਖਾਤੇ ਵਿੱਚ ਲੌਗ ਅੱਪਲੋਡ ਕਰੋ।

ਪੂਰੀ ਜਾਂਚ ਚਲਾਓ →

ਗਾਈਡ

AI ਕ੍ਰੌਲਰ IP ਜਾਂਚ ਕਿਵੇਂ ਵਰਤਣੀ ਹੈ

ਇਹ ਟੈਕਸਟ ਅੰਗਰੇਜ਼ੀ ਤੋਂ ਮਸ਼ੀਨ ਰਾਹੀਂ ਅਨੁਵਾਦ ਕੀਤਾ ਗਿਆ ਹੈ।

ਇਹ IP ਜਾਂਚ ਕੀ ਕਰਦੀ ਹੈ

ਆਪਣੇ ਸਰਵਰ ਜਾਂ ਫਾਇਰਵਾਲ ਲੌਗਾਂ ਵਿੱਚੋਂ ਇੱਕ IPv4 ਜਾਂ IPv6 ਪਤਾ ਪੇਸਟ ਕਰੋ। ਜਾਂਚ ਉਸਨੂੰ ਉਨ੍ਹਾਂ IP ਰੇਂਜਾਂ ਵਿੱਚ ਲੱਭਦੀ ਹੈ ਜੋ ਕ੍ਰੌਲਰ ਚਲਾਉਣ ਵਾਲੀਆਂ ਕੰਪਨੀਆਂ ਆਪ ਪ੍ਰਕਾਸ਼ਿਤ ਕਰਦੀਆਂ ਹਨ: GPTBot, OAI-SearchBot ਅਤੇ ChatGPT-User ਲਈ OpenAI, PerplexityBot ਅਤੇ Perplexity-User ਲਈ Perplexity, Googlebot ਲਈ Google, Bingbot ਲਈ Microsoft ਅਤੇ Applebot ਲਈ Apple। ਅਸੀਂ ਉਹ ਪ੍ਰਕਾਸ਼ਿਤ ਸੂਚੀਆਂ ਰੋਜ਼ਾਨਾ ਪੜ੍ਹਦੇ ਹਾਂ। ਜਵਾਬ ਵਿੱਚ ਹਰ ਉਸ ਕ੍ਰੌਲਰ ਦਾ ਨਾਮ ਹੁੰਦਾ ਹੈ ਜਿਸਦੀਆਂ ਰੇਂਜਾਂ ਵਿੱਚ ਇਹ ਪਤਾ ਹੈ, ਜਾਂ ਦੱਸਿਆ ਜਾਂਦਾ ਹੈ ਕਿ ਕਿਸੇ ਵਿੱਚ ਨਹੀਂ।

ਨਤੀਜਾ ਕਿਵੇਂ ਪੜ੍ਹਨਾ ਹੈ

ਕੋਈ ਵੀ GPTBot ਹੋਣ ਦਾ ਦਾਅਵਾ ਕਿਉਂ ਕਰ ਸਕਦਾ ਹੈ

ਯੂਜ਼ਰ ਏਜੰਟ ਟੈਕਸਟ ਦੀ ਇੱਕ ਲਾਈਨ ਹੈ ਜੋ ਕਲਾਇੰਟ ਭੇਜਦਾ ਹੈ, ਅਤੇ ਕੋਈ ਵੀ ਉਸ ਵਿੱਚ GPTBot ਜਾਂ Googlebot ਲਿਖ ਸਕਦਾ ਹੈ। ਸਕ੍ਰੈਪਰ ਸਾਦੇ ਫਿਲਟਰਾਂ ਤੋਂ ਲੰਘਣ ਲਈ ਇਹ ਕਰਦੇ ਹਨ। ਇਸੇ ਕਰਕੇ ਸਿਰਫ਼ ਯੂਜ਼ਰ ਏਜੰਟ ਦੇਖਣ ਵਾਲੀਆਂ ਫਾਇਰਵਾਲਾਂ ਦੋਵੇਂ ਪਾਸਿਓਂ ਧੋਖਾ ਖਾ ਸਕਦੀਆਂ ਹਨ: ਉਹ ਨਕਲੀ ਕ੍ਰੌਲਰਾਂ ਨੂੰ ਅੰਦਰ ਆਉਣ ਦਿੰਦੀਆਂ ਹਨ, ਜਾਂ ਨਕਲੀ ਕ੍ਰੌਲਰ ਵਿਰੁੱਧ ਲਿਖਿਆ ਨਿਯਮ ਅਸਲੀ ਨੂੰ ਵੀ ਬਲੌਕ ਕਰ ਦਿੰਦਾ ਹੈ। IP ਪਤੇ ਨੂੰ ਕੰਪਨੀ ਦੀ ਪ੍ਰਕਾਸ਼ਿਤ ਸੂਚੀ ਨਾਲ ਮਿਲਾਉਣਾ ਹੀ ਉਨ੍ਹਾਂ ਨੂੰ ਵੱਖ ਕਰਨ ਦਾ ਤਰੀਕਾ ਹੈ।

203.0.113.9 - - [18/Nov/2026:10:12:01 +0000] "GET /pricing/ HTTP/1.1" 200 5123 "-" "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.4; +https://openai.com/gptbot)"

ਸੂਚੀ ਵਿੱਚ ਨਾ ਹੋਣ ਵਾਲੇ ਕ੍ਰੌਲਰਾਂ ਦੀ ਪੁਸ਼ਟੀ

ਜਿਨ੍ਹਾਂ ਕ੍ਰੌਲਰਾਂ ਦੀਆਂ ਕੰਪਨੀਆਂ ਸਾਡੇ ਵੱਲੋਂ ਪੜ੍ਹੀ ਜਾਣ ਵਾਲੀ ਰੇਂਜ ਪ੍ਰਕਾਸ਼ਿਤ ਨਹੀਂ ਕਰਦੀਆਂ, ਉਨ੍ਹਾਂ ਲਈ ਕੰਪਨੀ ਦੇ ਆਪਣੇ ਦਸਤਾਵੇਜ਼ ਵਰਤੋ। Google, Microsoft ਅਤੇ Apple DNS ਜਾਂਚ ਦਾ ਵੀ ਸਮਰਥਨ ਕਰਦੇ ਹਨ: ਪਤੇ ਦਾ ਹੋਸਟ ਨਾਮ ਲੱਭੋ, ਜਾਂਚੋ ਕਿ ਉਹ ਕੰਪਨੀ ਦੇ ਡੋਮੇਨ 'ਤੇ ਖ਼ਤਮ ਹੁੰਦਾ ਹੈ, ਜਿਵੇਂ googlebot.com, google.com, search.msn.com ਜਾਂ applebot.apple.com, ਫਿਰ ਉਹ ਹੋਸਟ ਨਾਮ ਦੁਬਾਰਾ ਲੱਭੋ ਅਤੇ ਪੁਸ਼ਟੀ ਕਰੋ ਕਿ ਉਹ ਉਹੀ ਪਤਾ ਦਿੰਦਾ ਹੈ।

host 66.249.66.1
1.66.249.66.in-addr.arpa domain name pointer crawl-66-249-66-1.googlebot.com.
host crawl-66-249-66-1.googlebot.com
crawl-66-249-66-1.googlebot.com has address 66.249.66.1

ਆਮ ਗਲਤੀਆਂ

ਇੱਕ ਪਤੇ ਤੋਂ ਪੂਰੇ ਲੌਗ ਤੱਕ

ਇਹ ਜਾਂਚ ਇੱਕ ਸਮੇਂ ਇੱਕ ਪਤੇ ਦਾ ਜਵਾਬ ਦਿੰਦੀ ਹੈ। ਤੁਹਾਡੇ AISeeWhy ਖਾਤੇ ਵਿੱਚ, ਭੁਗਤਾਨ ਵਾਲੇ ਪਲਾਨਾਂ 'ਤੇ ਸਰਵਰ-ਲੌਗ ਜਾਂਚ ਪੂਰਾ ਐਕਸੈਸ ਲੌਗ ਪੜ੍ਹਦੀ ਹੈ, ਹਰ AI ਕ੍ਰੌਲਰ ਦੀਆਂ ਫੇਰੀਆਂ ਗਿਣਦੀ ਹੈ, ਇਨ੍ਹਾਂ ਪ੍ਰਕਾਸ਼ਿਤ ਰੇਂਜਾਂ ਨਾਲ ਅਸਲੀ ਕ੍ਰੌਲਰਾਂ ਨੂੰ ਨਕਲੀਆਂ ਤੋਂ ਵੱਖ ਕਰਦੀ ਹੈ ਅਤੇ ਦਿਖਾਉਂਦੀ ਹੈ ਕਿ ਤੁਹਾਡੇ ਸਰਵਰ ਨੇ ਉਨ੍ਹਾਂ ਨੂੰ ਕੀ ਜਵਾਬ ਦਿੱਤਾ।

ਅਕਸਰ ਪੁੱਛੇ ਜਾਂਦੇ ਸਵਾਲ

ਕੀ ਇਸ ਜਾਂਚ ਵਿੱਚ ClaudeBot ਆਉਂਦਾ ਹੈ?

ਫ਼ਿਲਹਾਲ ਨਹੀਂ: ਜਾਂਚ ਉਨ੍ਹਾਂ ਕ੍ਰੌਲਰਾਂ ਨੂੰ ਕਵਰ ਕਰਦੀ ਹੈ ਜਿਨ੍ਹਾਂ ਦੀਆਂ ਪ੍ਰਕਾਸ਼ਿਤ ਰੇਂਜ ਫਾਈਲਾਂ ਅਸੀਂ ਪੜ੍ਹਦੇ ਹਾਂ, ਜੋ ਨਤੀਜੇ ਦੇ ਹੇਠਾਂ ਦਿੱਤੇ ਹਨ। ਹੋਰ ਕ੍ਰੌਲਰਾਂ ਲਈ ਕੰਪਨੀ ਦੇ ਦਸਤਾਵੇਜ਼ ਦੇਖੋ।

ਪਤਾ Googlebot ਦੀ ਰੇਂਜ ਵਿੱਚ ਹੈ ਪਰ ਯੂਜ਼ਰ ਏਜੰਟ ਕੁਝ ਹੋਰ ਕਹਿੰਦਾ ਹੈ। ਇਸਦਾ ਕੀ ਮਤਲਬ ਹੈ?

ਬੇਨਤੀ Google ਦੇ ਨੈੱਟਵਰਕ ਤੋਂ ਆਈ। Google ਕਈ ਕ੍ਰੌਲਰ ਅਤੇ fetchers ਚਲਾਉਂਦਾ ਹੈ; ਯੂਜ਼ਰ ਏਜੰਟ ਦੱਸਦਾ ਹੈ ਕਿ ਕਿਹੜਾ। ਇਹ Google ਹੋਣ ਦਾ ਢੌਂਗ ਕਰਨ ਵਾਲੀ ਕੋਈ ਤੀਜੀ ਧਿਰ ਨਹੀਂ ਸੀ।

ਕੀ ਮੈਂ ਇੱਕੋ ਵਾਰ ਕਈ ਪਤੇ ਜਾਂਚ ਸਕਦਾ ਹਾਂ?

ਇਸ ਮੁਫ਼ਤ ਟੂਲ ਨਾਲ ਨਹੀਂ। ਉਸ ਵਿਚਲੀ ਹਰ ਫੇਰੀ ਜਾਂਚਣ ਲਈ ਲੌਗ ਆਪਣੇ ਖਾਤੇ ਵਿੱਚ ਅੱਪਲੋਡ ਕਰੋ।

ਕੀ ਮੇਰਾ ਦਰਜ ਕੀਤਾ ਪਤਾ ਸਟੋਰ ਹੁੰਦਾ ਹੈ?

ਇਹ ਜਾਂਚ ਦਾ ਜਵਾਬ ਦੇਣ ਲਈ ਵਰਤਿਆ ਜਾਂਦਾ ਹੈ ਅਤੇ ਤੁਹਾਡੀ ਬੇਨਤੀ ਨਾਲ ਸੇਵ ਨਹੀਂ ਹੁੰਦਾ।

ਸੰਬੰਧਿਤ ਟੂਲ ਅਤੇ ਗਾਈਡਾਂ