Applebot
Applebot ಎಂಬುದು Apple ನ ವೆಬ್ ಕ್ರಾಲರ್. ಇದರ ಡೇಟಾ Spotlight, Siri ಮತ್ತು Safari ನಲ್ಲಿ ಹುಡುಕಾಟಕ್ಕೆ ಶಕ್ತಿ ನೀಡುತ್ತದೆ, ಮತ್ತು ಅದನ್ನು Apple ನ foundation ಮಾದರಿಗಳ ತರಬೇತಿಗೂ ಬಳಸಬಹುದು ಎಂದು Apple ಹೇಳುತ್ತದೆ. Applebot ಅನ್ನು ತಡೆದರೆ ನಿಮ್ಮ ಪುಟಗಳು ಆ Apple ಹುಡುಕಾಟ ವೈಶಿಷ್ಟ್ಯಗಳಿಂದ ಹೊರಬೀಳುತ್ತವೆ; ತರಬೇತಿಯಿಂದ ಮಾತ್ರ ಹೊರಗುಳಿಯಲು, ಬದಲಿಗೆ Applebot-Extended ಅನ್ನು ನಿಷೇಧಿಸಿ.
ಇದನ್ನು ಹೇಗೆ ಅನುಮತಿಸುವುದು
User-agent: Applebot
Allow: / ಇದನ್ನು ಹೇಗೆ ತಡೆಯುವುದು
User-agent: Applebot
Disallow: / ಇದು ಏನು ಮಾಡುತ್ತದೆ
Applebot ಕ್ರಾಲ್ ಮಾಡಿದ ಡೇಟಾ Spotlight, Siri ಮತ್ತು Safari ಸೇರಿದಂತೆ ತನ್ನ ಪರಿಸರ ವ್ಯವಸ್ಥೆಯಾದ್ಯಂತ ಹುಡುಕಾಟ ವೈಶಿಷ್ಟ್ಯಗಳಿಗೆ ಶಕ್ತಿ ನೀಡುತ್ತದೆ, ಮತ್ತು robots.txt ನಲ್ಲಿ Applebot ಅನ್ನು ಅನುಮತಿಸಿದರೆ ನಿಮ್ಮ ವಿಷಯ Apple ಬಳಕೆದಾರರ ಹುಡುಕಾಟ ಫಲಿತಾಂಶಗಳಲ್ಲಿ ಕಾಣಿಸುತ್ತದೆ ಎಂದು Apple ಹೇಳುತ್ತದೆ. ಈ ಡೇಟಾವನ್ನು Apple foundation ಮಾದರಿಗಳ ತರಬೇತಿಗೆ ಮತ್ತು Apple ಉತ್ಪನ್ನಗಳಲ್ಲಿ AI ಮಾದರಿಗಳಿಗೆ ಇತ್ತೀಚಿನ ಸಂದರ್ಭ ನೀಡಲೂ ಬಳಸಬಹುದು.
Applebot ತನಗೆ ಉದ್ದೇಶಿಸಿದ robots.txt ನಿರ್ದೇಶನಗಳನ್ನು ಗೌರವಿಸುತ್ತದೆ. ನಿಮ್ಮ robots.txt Applebot ಅನ್ನು ಉಲ್ಲೇಖಿಸದೆ Googlebot ಅನ್ನು ಉಲ್ಲೇಖಿಸಿದರೆ, Applebot Googlebot ನಿಯಮಗಳನ್ನು ಅನುಸರಿಸುತ್ತದೆ ಎಂದು Apple ಹೇಳುತ್ತದೆ. ಇದು Crawl-delay ಅನುಸರಿಸುವುದಿಲ್ಲ. ತರಬೇತಿ ಬಳಕೆಯನ್ನು Applebot-Extended ಟೋಕನ್ನಿಂದ ಪ್ರತ್ಯೇಕವಾಗಿ ನಿಯಂತ್ರಿಸಲಾಗುತ್ತದೆ.
ನಮ್ಮ 2026-11 ಅಧ್ಯಯನದಲ್ಲಿ, robots.txt ಇರುವ ಜನಪ್ರಿಯ ಸೈಟ್ಗಳಲ್ಲಿ 3.9% ಇದನ್ನು ತಡೆದಿದ್ದವು. →
robots.txt ಟೋಕನ್
Applebot
User-agent ಸ್ಟ್ರಿಂಗ್
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/17.4 Safari/605.1.15 (Applebot/0.1; +http://www.apple.com/go/applebot) ನಿಜವಾದ ಭೇಟಿಗಳನ್ನು ಹೇಗೆ ಪರಿಶೀಲಿಸುವುದು
applebot.apple.com ಡೊಮೇನ್ನಲ್ಲಿನ hostname ಹಿಂತಿರುಗಿಸುವ reverse DNS lookup ಮೂಲಕ Applebot ಟ್ರಾಫಿಕ್ ಅನ್ನು ಗುರುತಿಸಬಹುದು ಎಂದು Apple ಹೇಳುತ್ತದೆ; hostname ಅದೇ IP ಗೆ ಮರಳಿ resolve ಆಗುತ್ತದೆ ಎಂದು forward lookup ಮೂಲಕ ಖಚಿತಪಡಿಸಿ. Apple applebot.json ನಲ್ಲಿ ಪ್ರಕಟಿಸುವ CIDR ಪ್ರಿಫಿಕ್ಸ್ಗಳೊಂದಿಗೂ IP ಅನ್ನು ಹೊಂದಿಸಬಹುದು.
ನಿಮ್ಮ ಸೈಟ್ ಇದನ್ನು ಒಳಗೆ ಬಿಡುತ್ತದೆಯೇ ಎಂದು ಪರಿಶೀಲಿಸಿ →
AI ಕ್ರಾಲರ್ಗಳಿಗೆ robots.txt: ಏನನ್ನು ಅನುಮತಿಸಬೇಕು, ಏನನ್ನು ತಡೆಯಬೇಕು →