पेज सर्च इंजिनना ते इंडेक्स न करण्यास सांगते
पेज सर्च इंजिनना ते इंडेक्स न करण्यास सांगते: robots, googlebot किंवा bingbot meta टॅगमध्ये, किंवा X-Robots-Tag HTTP हेडरमध्ये noindex किंवा none आहे. कोणते ते निष्कर्ष दाखवतो. मग Google आणि Bing पेज त्यांच्या निकालांबाहेर ठेवतात. पेज सापडायला हवे असल्यास नियम काढा.
याचा अर्थ काय
noindex नियम (meta) हे पेज Google आणि Bing पासून, आणि त्यामुळे त्यांच्या इंडेक्सवर आधारित AI उत्तरांपासून दूर ठेवतो. पेज सापडायला हवे असल्यास तो काढा.
AI सर्चसाठी हे का महत्त्वाचे आहे
Google आणि Bing पुढच्या वेळी पेज क्रॉल करतात तेव्हा noindex नियम पाळतात, आणि पेज त्यांच्या निकालांमधून बाहेर पडते. त्या सर्च इंडेक्सवर आधारित AI उत्तरे आणि AI सर्च वैशिष्ट्यांनाही मग पेज सापडत नाही.
Checkout च्या पायऱ्या, अंतर्गत सर्च निकाल किंवा धन्यवाद पेजेस यासारख्या पेजसाठी noindex योग्य आहे. ते staging साइटवरून राहून गेलेले असल्यास, संपूर्ण साइटवरच्या "सर्च इंजिनना परावृत्त करा" पर्यायाने सेट झालेले असल्यास, किंवा HTML मध्ये कोणालाही न दिसणाऱ्या सर्व्हर किंवा CDN नियमाने हेडर म्हणून पाठवले जात असल्यास ती समस्या असते.
हे कसे दुरुस्त करावे
- निष्कर्षातील स्रोत तपासा: HTML मधील meta टॅग किंवा
X-Robots-Tagहेडर. - Meta टॅगसाठी त्यातून
noindexआणिnoneकाढा किंवा टॅगच हटवा. WordPress मध्ये Settings → Reading → "Discourage search engines from indexing this site" बंद आहे हे तपासा, आणि पेजच्या स्वतःच्या SEO सेटिंग्ज तपासा. Shopify मध्ये robots meta टॅग जोडणारा थीम कोड आणि ॲप्स तपासा. - हेडरसाठी तो कुठे सेट होतो ते शोधा, जसे की Nginx
add_header, ApacheHeader set,_headersफाइल, Cloudflare Transform Rule किंवा फ्रेमवर्क middleware, आणि या पेजसाठी तो काढा. - त्याच वेळी पेज robots.txt मध्ये ब्लॉक करू नका: noindex गेले आहे हे पाहण्यासाठी क्रॉलरना पेज मिळवावे लागते.
- निकालाची खात्री करण्यासाठी पेजच्या अहवालावर "पुन्हा तपासा" चालवा.
उदाहरण
# nginx: send noindex only where it belongs, not site-wide
location /search/ {
add_header X-Robots-Tag "noindex";
} उपाय काम करतो याची खात्री कशी करायची
बदल केल्यानंतर अहवालावर "पुन्हा तपासा" दाबा: काय दुरुस्त झाले आणि स्कोअर कसा बदलला ते तो दाखवतो.