Applebot
Applebot એ Appleનો વેબ ક્રૉલર છે. તેનો ડેટા Spotlight, Siri અને Safariમાં સર્ચ ચલાવે છે, અને Apple કહે છે કે તેનો ઉપયોગ Appleના ફાઉન્ડેશન મૉડલને ટ્રેન કરવા માટે પણ થઈ શકે છે. Applebotને બ્લૉક કરવાથી તમારાં પેજ Appleનાં એ સર્ચ ફીચરમાંથી દૂર થાય છે; ફક્ત ટ્રેનિંગમાંથી opt out કરવા, તેના બદલે Applebot-Extendedને મનાઈ કરો.
તેને કેવી રીતે આવવા દેવો
User-agent: Applebot
Allow: / તેને કેવી રીતે બ્લૉક કરવો
User-agent: Applebot
Disallow: / તે શું કરે છે
Apple કહે છે કે Applebot દ્વારા ક્રૉલ થયેલો ડેટા તેની ઇકોસિસ્ટમમાં Spotlight, Siri અને Safari સહિતનાં સર્ચ ફીચર ચલાવે છે, અને robots.txtમાં Applebotને મંજૂરી આપવાથી તમારું કન્ટેન્ટ Appleના યુઝર માટેનાં સર્ચ પરિણામોમાં દેખાઈ શકે છે. આ ડેટાનો ઉપયોગ Appleના ફાઉન્ડેશન મૉડલને ટ્રેન કરવા અને Appleનાં પ્રોડક્ટમાં AI મૉડલને તાજો સંદર્ભ આપવા માટે પણ થઈ શકે છે.
Applebot તેને ઉદ્દેશીને લખેલા robots.txt ડિરેક્ટિવનું પાલન કરે છે. જો તમારી robots.txtમાં Applebotનો ઉલ્લેખ ન હોય પણ Googlebotનો હોય, તો Apple કહે છે કે Applebot Googlebotના નિયમોનું પાલન કરે છે. તે Crawl-delayનું પાલન કરતો નથી. ટ્રેનિંગ માટેનો ઉપયોગ Applebot-Extended ટોકનથી અલગથી નિયંત્રિત થાય છે.
અમારા 2026-11ના અભ્યાસમાં, robots.txt ધરાવતી લોકપ્રિય સાઇટમાંથી 3.9% સાઇટે તેને બ્લૉક કર્યો હતો. →
robots.txt ટોકન
Applebot
યુઝર-એજન્ટ સ્ટ્રિંગ
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/17.4 Safari/605.1.15 (Applebot/0.1; +http://www.apple.com/go/applebot) સાચી મુલાકાતો કેવી રીતે ચકાસવી
Apple કહે છે કે Applebotનો ટ્રાફિક એવા reverse DNS lookupથી ઓળખી શકાય છે જે applebot.apple.com ડોમેનમાંનું hostname આપે; forward lookupથી ખાતરી કરો કે hostname પાછું એ જ IP પર resolve થાય છે. તમે IPને Apple દ્વારા applebot.jsonમાં પ્રકાશિત CIDR prefix સાથે પણ મેળવી શકો છો.
તપાસો કે તમારી સાઇટ તેને આવવા દે છે કે નહીં →
AI ક્રૉલર માટે robots.txt: શું મંજૂર કરવું, શું બ્લૉક કરવું →