Claude-SearchBot

Anthropic · AI ಹುಡುಕಾಟ

Claude-SearchBot ಎಂಬುದು Claude ನಲ್ಲಿನ ಹುಡುಕಾಟ ಫಲಿತಾಂಶಗಳ ಪ್ರಸ್ತುತತೆ ಮತ್ತು ನಿಖರತೆಯನ್ನು ಸುಧಾರಿಸಲು ವೆಬ್ ಅನ್ನು ಕ್ರಾಲ್ ಮಾಡುತ್ತದೆ. ಇದನ್ನು ತಡೆಯುವುದು ನಿಮ್ಮ ವಿಷಯವನ್ನು ಹುಡುಕಾಟಕ್ಕಾಗಿ ಇಂಡೆಕ್ಸ್ ಮಾಡುವುದನ್ನು ತಡೆಯುತ್ತದೆ, ಇದು ಬಳಕೆದಾರರ ಹುಡುಕಾಟ ಫಲಿತಾಂಶಗಳಲ್ಲಿ ನಿಮ್ಮ ಗೋಚರತೆ ಮತ್ತು ನಿಖರತೆಯನ್ನು ಕಡಿಮೆ ಮಾಡಬಹುದು ಎಂದು Anthropic ಹೇಳುತ್ತದೆ. Claude ನಿಮ್ಮ ಪುಟಗಳನ್ನು ಹುಡುಕಿ ಉಲ್ಲೇಖಿಸಬೇಕೆಂದಿದ್ದರೆ ಇದನ್ನು ಅನುಮತಿಸಿ.

ಇದನ್ನು ಹೇಗೆ ಅನುಮತಿಸುವುದು

User-agent: Claude-SearchBot
Allow: /

ಇದನ್ನು ಹೇಗೆ ತಡೆಯುವುದು

User-agent: Claude-SearchBot
Disallow: /

ಇದು ಏನು ಮಾಡುತ್ತದೆ

ವೆಬ್‌ನಲ್ಲಿ ಸಂಚರಿಸಲು ಮತ್ತು Claude ಬಳಕೆದಾರರಿಗೆ ಹುಡುಕಾಟ ಫಲಿತಾಂಶಗಳ ಗುಣಮಟ್ಟ ಸುಧಾರಿಸಲು Anthropic Claude-SearchBot ಬಳಸುತ್ತದೆ. ಇದು ತರಬೇತಿ ಕ್ರಾಲರ್ ClaudeBot ನಿಂದ ಪ್ರತ್ಯೇಕ, ಆದ್ದರಿಂದ ತರಬೇತಿಯಿಂದ ಹೊರಗುಳಿದು ಹುಡುಕಾಟವನ್ನು ಅನುಮತಿಸಬಹುದು.

Claude-SearchBot ಅನ್ನು ನಿಷ್ಕ್ರಿಯಗೊಳಿಸುವುದು ಹುಡುಕಾಟ ಸುಧಾರಣೆಗಾಗಿ ನಿಮ್ಮ ವಿಷಯದ ಇಂಡೆಕ್ಸಿಂಗ್ ಅನ್ನು ತಡೆಯುತ್ತದೆ, ಇದು ಬಳಕೆದಾರರ ಹುಡುಕಾಟ ಫಲಿತಾಂಶಗಳಲ್ಲಿ ನಿಮ್ಮ ಸೈಟ್‌ನ ಗೋಚರತೆ ಮತ್ತು ನಿಖರತೆಯನ್ನು ಕಡಿಮೆ ಮಾಡಬಹುದು ಎಂದು Anthropic ಹೇಳುತ್ತದೆ. Anthropic ನ ಬಾಟ್‌ಗಳು robots.txt ಅನ್ನು ಪಾಲಿಸುತ್ತವೆ ಮತ್ತು ತಪ್ಪಿಸಿಕೊಳ್ಳುವಿಕೆ ತಡೆ ಕ್ರಮಗಳನ್ನು ಗೌರವಿಸುತ್ತವೆ, ಆದ್ದರಿಂದ CAPTCHA ಅಥವಾ ಚಾಲೆಂಜ್ ಪುಟ ಭೇಟಿಯನ್ನು ಕೊನೆಗೊಳಿಸುತ್ತದೆ.

ನಮ್ಮ 2026-11 ಅಧ್ಯಯನದಲ್ಲಿ, robots.txt ಇರುವ ಜನಪ್ರಿಯ ಸೈಟ್‌ಗಳಲ್ಲಿ 12.9% ಇದನ್ನು ತಡೆದಿದ್ದವು. →

robots.txt ಟೋಕನ್

Claude-SearchBot

ನಿಜವಾದ ಭೇಟಿಗಳನ್ನು ಹೇಗೆ ಪರಿಶೀಲಿಸುವುದು

Anthropic ತನ್ನ ಕ್ರಾಲರ್‌ಗಳ IP ವಿಳಾಸಗಳನ್ನು claude.com/crawling/bots.json ನಲ್ಲಿ ಪ್ರಕಟಿಸುತ್ತದೆ ಮತ್ತು ಆ ಪಟ್ಟಿಯಲ್ಲಿ IP ಇರುವ ಕ್ರಾಲರ್ Anthropic ನಿಂದ ಬಂದದ್ದು ಎಂದು ಹೇಳುತ್ತದೆ. user agent ಅನ್ನು ನಂಬುವ ಬದಲು ಮೂಲ IP ಅನ್ನು ಪಟ್ಟಿಯೊಂದಿಗೆ ಹೊಂದಿಸಿ. ಹೊರಗುಳಿಯಲು IP ತಡೆ ಬಳಸದಂತೆ Anthropic ಸಲಹೆ ನೀಡುತ್ತದೆ, ಏಕೆಂದರೆ ಅದು ಕ್ರಾಲರ್ robots.txt ಓದುವುದನ್ನೂ ನಿಲ್ಲಿಸುತ್ತದೆ.

ನಿಮ್ಮ ಸೈಟ್ ಇದನ್ನು ಒಳಗೆ ಬಿಡುತ್ತದೆಯೇ ಎಂದು ಪರಿಶೀಲಿಸಿ →

Anthropic ನ ಕ್ರಾಲರ್‌ಗಳು: ClaudeBot, Claude-SearchBot ಮತ್ತು Claude-User →