Applebot-Extended
Applebot-Extended ஒரு robots.txt டோக்கன், கிராலர் அல்ல. இதற்கு அனுமதி மறுப்பது, Applebot crawl செய்த உள்ளடக்கத்தைத் தனது generative அடிப்படை மாதிரிகளைப் பயிற்றுவிக்கப் பயன்படுத்த வேண்டாம் என்று Apple-க்குச் சொல்கிறது. இதற்கு அனுமதி மறுக்கும் பக்கங்கள் Apple-இன் தேடல் முடிவுகளில் இன்னும் தோன்றலாம் என்று Apple சொல்கிறது, எனவே இதைத் தடுப்பது Siri அல்லது Spotlight தெரிவுநிலையைப் பாதிக்காது.
இதை எப்படி அனுமதிப்பது
User-agent: Applebot-Extended
Allow: / இதை எப்படித் தடுப்பது
User-agent: Applebot-Extended
Disallow: / இது என்ன செய்கிறது
Applebot-Extended இணையப் பக்கங்களை crawl செய்வதில்லை என்று Apple சொல்கிறது. Applebot crawl செய்த தரவு எப்படிப் பயன்படலாம் என்பதைத் தீர்மானிக்க மட்டுமே இது பயன்படுகிறது. இதற்கு அனுமதி மறுப்பது, Apple Intelligence போன்ற generative AI அம்சங்களை இயக்கும் Apple அடிப்படை மாதிரிகளின் பயிற்சியிலிருந்து உங்கள் உள்ளடக்கத்தை விலக்குகிறது.
Applebot-Extended-க்கு அனுமதி மறுக்கும் பக்கங்கள் தேடல் முடிவுகளில் இன்னும் சேர்க்கப்படலாம்; இந்த விதி தேடல் தரவரிசையில் கருத்தில் கொள்ளப்படுவதில்லை என்று Apple சொல்கிறது. Crawl செய்வது Applebot டோக்கனால் கட்டுப்படுத்தப்படுகிறது.
எங்கள் 2026-11 ஆய்வில், robots.txt உள்ள பிரபலத் தளங்களில் 18.0% இதைத் தடுத்தன. →
robots.txt டோக்கன்
Applebot-Extended
உண்மையான வருகைகளை எப்படிச் சரிபார்ப்பது
உங்கள் log-களில் சரிபார்க்க எதுவும் இல்லை: Applebot-Extended ஒருபோதும் user agent ஆகத் தோன்றாது. அடிப்படைக் கோரிக்கைகள் Applebot-இடமிருந்து வருகின்றன; அவற்றை reverse DNS (applebot.apple.com) மூலமோ Apple வெளியிடும் IP வரம்புகளுடன் ஒப்பிட்டோ சரிபார்க்கலாம்.
உங்கள் தளம் இதை உள்ளே விடுகிறதா என்று சரிபாருங்கள் →
AI கிராலர்களுக்கான robots.txt: எதை அனுமதிப்பது, எதைத் தடுப்பது →