പേജ് ഇൻഡക്സ് ചെയ്യരുതെന്ന് സെർച്ച് എഞ്ചിനുകളോട് പറയുന്നു
പേജ് തന്നെ ഇൻഡക്സ് ചെയ്യരുതെന്ന് സെർച്ച് എഞ്ചിനുകളോട് പറയുന്നു: robots, googlebot അല്ലെങ്കിൽ bingbot meta ടാഗിലോ X-Robots-Tag HTTP ഹെഡറിലോ noindex അല്ലെങ്കിൽ none ഉണ്ട്. ഏതാണെന്ന് കണ്ടെത്തൽ കാണിക്കുന്നു. അപ്പോൾ Google-ഉം Bing-ഉം പേജ് അവയുടെ ഫലങ്ങളിൽ നിന്ന് ഒഴിവാക്കുന്നു. പേജ് കണ്ടെത്തപ്പെടണമെങ്കിൽ നിയമം നീക്കം ചെയ്യുക.
ഇതിന്റെ അർത്ഥം
ഒരു noindex നിയമം (meta) ഈ പേജിനെ Google-ൽ നിന്നും Bing-ൽ നിന്നും, അതുവഴി അവയുടെ ഇൻഡക്സിൽ നിർമ്മിച്ച AI ഉത്തരങ്ങളിൽ നിന്നും, മാറ്റിനിർത്തുന്നു. പേജ് കണ്ടെത്തപ്പെടണമെങ്കിൽ അത് നീക്കം ചെയ്യുക.
AI സെർച്ചിന് ഇത് പ്രധാനമാകുന്നത് എന്തുകൊണ്ട്
അടുത്ത തവണ പേജ് ക്രോൾ ചെയ്യുമ്പോൾ Google-ഉം Bing-ഉം noindex നിയമം പാലിക്കുന്നു, പേജ് അവയുടെ ഫലങ്ങളിൽ നിന്ന് പുറത്താകുന്നു. ആ സെർച്ച് ഇൻഡക്സുകളിൽ നിർമ്മിച്ച AI ഉത്തരങ്ങളും AI സെർച്ച് ഫീച്ചറുകളും അപ്പോൾ പേജ് കണ്ടെത്തുകയുമില്ല.
ചെക്ക്ഔട്ട് ഘട്ടങ്ങൾ, ഇന്റേണൽ സെർച്ച് ഫലങ്ങൾ, നന്ദി പേജുകൾ പോലുള്ളവയ്ക്ക് noindex ശരിയാണ്. സ്റ്റേജിംഗ് സൈറ്റിൽ നിന്ന് ബാക്കിയായതോ, സൈറ്റ് മുഴുവനുമുള്ള “discourage search engines” ഓപ്ഷൻ സജ്ജമാക്കിയതോ, HTML-ൽ ആരും കാണാത്ത ഒരു സെർവർ അല്ലെങ്കിൽ CDN നിയമം ഹെഡറായി അയയ്ക്കുന്നതോ ആകുമ്പോഴാണ് ഇത് പ്രശ്നമാകുന്നത്.
ഇത് എങ്ങനെ പരിഹരിക്കാം
- കണ്ടെത്തലിലെ ഉറവിടം പരിശോധിക്കുക: HTML-ലെ meta ടാഗ് അല്ലെങ്കിൽ
X-Robots-Tagഹെഡർ. - meta ടാഗാണെങ്കിൽ, അതിൽ നിന്ന്
noindex,noneഎന്നിവ നീക്കുക അല്ലെങ്കിൽ ടാഗ് ഇല്ലാതാക്കുക. WordPress-ൽ Settings → Reading → “Discourage search engines from indexing this site” ഓഫാണെന്ന് പരിശോധിക്കുക, പേജിന്റെ സ്വന്തം SEO ക്രമീകരണങ്ങളും പരിശോധിക്കുക. Shopify-ൽ robots meta ടാഗ് ചേർക്കുന്ന തീം കോഡും ആപ്പുകളും പരിശോധിക്കുക. - ഹെഡറാണെങ്കിൽ, Nginx
add_header, ApacheHeader set,_headersഫയൽ, Cloudflare Transform Rule അല്ലെങ്കിൽ ഫ്രെയിംവർക്ക് മിഡിൽവെയർ പോലെ അത് എവിടെയാണ് സജ്ജമാക്കിയതെന്ന് കണ്ടെത്തി ഈ പേജിനായി നീക്കം ചെയ്യുക. - അതേസമയം robots.txt-ൽ പേജ് തടയരുത്: noindex പോയെന്ന് കാണാൻ ക്രോളറുകൾ പേജ് എടുക്കേണ്ടതുണ്ട്.
- ഫലം ഉറപ്പാക്കാൻ പേജ് റിപ്പോർട്ടിൽ “വീണ്ടും പരിശോധിക്കുക” പ്രവർത്തിപ്പിക്കുക.
ഉദാഹരണം
# nginx: send noindex only where it belongs, not site-wide
location /search/ {
add_header X-Robots-Tag "noindex";
} പരിഹാരം എങ്ങനെ സ്ഥിരീകരിക്കാം
മാറ്റം വരുത്തിയശേഷം റിപ്പോർട്ടിൽ "വീണ്ടും പരിശോധിക്കുക" അമർത്തുക: എന്ത് പരിഹരിച്ചുവെന്നും സ്കോർ എങ്ങനെ മാറിയെന്നും അത് കാണിക്കും.