Claude-SearchBot

Anthropic · AI സെർച്ച്

Claude-ലെ സെർച്ച് ഫലങ്ങളുടെ പ്രസക്തിയും കൃത്യതയും മെച്ചപ്പെടുത്താൻ Claude-SearchBot വെബ് ക്രോൾ ചെയ്യുന്നു. ഇതിനെ തടയുന്നത് നിങ്ങളുടെ ഉള്ളടക്കം സെർച്ചിനായി ഇൻഡക്സ് ചെയ്യുന്നത് തടയുമെന്നും, ഉപയോക്താക്കളുടെ സെർച്ച് ഫലങ്ങളിൽ നിങ്ങളുടെ ദൃശ്യതയും കൃത്യതയും കുറഞ്ഞേക്കാമെന്നും Anthropic പറയുന്നു. Claude നിങ്ങളുടെ പേജുകൾ കണ്ടെത്തി ഉദ്ധരിക്കണമെങ്കിൽ ഇതിനെ അനുവദിക്കുക.

ഇതിനെ എങ്ങനെ അനുവദിക്കാം

User-agent: Claude-SearchBot
Allow: /

ഇതിനെ എങ്ങനെ തടയാം

User-agent: Claude-SearchBot
Disallow: /

ഇത് എന്തു ചെയ്യുന്നു

വെബിലൂടെ സഞ്ചരിച്ച് Claude ഉപയോക്താക്കൾക്കുള്ള സെർച്ച് ഫലങ്ങളുടെ ഗുണനിലവാരം മെച്ചപ്പെടുത്താൻ Anthropic Claude-SearchBot ഉപയോഗിക്കുന്നു. ഇത് പരിശീലന ക്രോളറായ ClaudeBot-ൽ നിന്ന് വേറിട്ടതാണ്, അതിനാൽ പരിശീലനത്തിൽ നിന്ന് ഒഴിവായിക്കൊണ്ട് സെർച്ച് അനുവദിക്കാം.

Claude-SearchBot പ്രവർത്തനരഹിതമാക്കുന്നത് സെർച്ച് ഒപ്റ്റിമൈസേഷനായി നിങ്ങളുടെ ഉള്ളടക്കം ഇൻഡക്സ് ചെയ്യുന്നത് തടയുമെന്നും, ഉപയോക്താക്കളുടെ സെർച്ച് ഫലങ്ങളിൽ നിങ്ങളുടെ സൈറ്റിന്റെ ദൃശ്യതയും കൃത്യതയും കുറഞ്ഞേക്കാമെന്നും Anthropic പറയുന്നു. Anthropic-ന്റെ ബോട്ടുകൾ robots.txt പാലിക്കുകയും മറികടക്കൽ തടയുന്ന നടപടികളെ മാനിക്കുകയും ചെയ്യുന്നു, അതിനാൽ ഒരു CAPTCHA അല്ലെങ്കിൽ ചലഞ്ച് പേജ് സന്ദർശനം അവസാനിപ്പിക്കും.

ഞങ്ങളുടെ 2026-11 പഠനത്തിൽ, robots.txt ഉള്ള ജനപ്രിയ സൈറ്റുകളിൽ 12.9% ഇതിനെ തടഞ്ഞിരുന്നു. →

robots.txt ടോക്കൺ

Claude-SearchBot

യഥാർത്ഥ സന്ദർശനങ്ങൾ എങ്ങനെ പരിശോധിച്ചുറപ്പിക്കാം

Anthropic അതിന്റെ ക്രോളറുകളുടെ IP വിലാസങ്ങൾ claude.com/crawling/bots.json-ൽ പ്രസിദ്ധീകരിക്കുന്നു, ആ പട്ടികയിൽ IP ഉള്ള ക്രോളർ Anthropic-ൽ നിന്നുള്ളതാണെന്ന് പറയുന്നു. യൂസർ ഏജന്റിനെ വിശ്വസിക്കുന്നതിന് പകരം ഉറവിട IP ആ പട്ടികയുമായി ഒത്തുനോക്കുക. ഒഴിവാകാൻ IP തടയൽ ഉപയോഗിക്കരുതെന്ന് Anthropic ഉപദേശിക്കുന്നു, കാരണം അത് ക്രോളറിനെ robots.txt വായിക്കുന്നതിൽ നിന്നും തടയുന്നു.

നിങ്ങളുടെ സൈറ്റ് ഇതിനെ അകത്തേക്ക് കടത്തുന്നുണ്ടോ എന്ന് പരിശോധിക്കുക →

Anthropic-ന്റെ ക്രോളറുകൾ: ClaudeBot, Claude-SearchBot, Claude-User →