Applebot-Extended
Applebot-Extended یک توکن robots.txt است، نه یک خزنده. ممنوع کردن آن به Apple میگوید از محتوایی که Applebot خزیده برای آموزش مدلهای پایه مولد خود استفاده نکند. Apple میگوید صفحههایی که آن را ممنوع میکنند همچنان میتوانند در نتایج جستجوی Apple ظاهر شوند، پس مسدود کردن آن روی دیده شدن در Siri یا Spotlight اثری ندارد.
چطور به آن اجازه دهید
User-agent: Applebot-Extended
Allow: / چطور آن را مسدود کنید
User-agent: Applebot-Extended
Disallow: / چه کاری میکند
Apple میگوید Applebot-Extended صفحههای وب را نمیخزد. فقط برای تعیین اینکه دادههای خزیدهشده توسط Applebot چطور میتوانند استفاده شوند به کار میرود. ممنوع کردن آن محتوای شما را از آموزش مدلهای پایه Apple که قابلیتهای هوش مصنوعی مولد مانند Apple Intelligence را پشتیبانی میکنند خارج میکند.
صفحههایی که Applebot-Extended را ممنوع میکنند همچنان میتوانند در نتایج جستجو قرار گیرند، و Apple میگوید این قانون در رتبهبندی جستجو در نظر گرفته نمیشود. خود خزش با توکن Applebot کنترل میشود.
در پژوهش 2026-11 ما، 18.0% از سایتهای پربازدیدی که robots.txt داشتند آن را مسدود کرده بودند. ←
توکن robots.txt
Applebot-Extended
چطور بازدیدهای واقعی را تأیید کنید
در لاگهای شما چیزی برای تأیید نیست: Applebot-Extended هرگز بهعنوان user agent ظاهر نمیشود. درخواستهای زیربنایی از Applebot میآیند که میتوانید آن را با DNS معکوس (applebot.apple.com) یا با محدودههای IP منتشرشده Apple تأیید کنید.
بررسی کنید که آیا سایت شما به آن اجازه ورود میدهد ←
robots.txt برای خزندههای هوش مصنوعی: چه چیزی را مجاز و چه چیزی را مسدود کنیم ←