Google-Extended
Google-Extended ഒരു robots.txt ടോക്കണാണ്, പ്രത്യേക ക്രോളറല്ല. Google ക്രോൾ ചെയ്ത ഉള്ളടക്കം ഭാവിയിലെ Gemini മോഡലുകളുടെ പരിശീലനത്തിനും Gemini Apps, Vertex AI എന്നിവയിലെ ഗ്രൗണ്ടിംഗിനും ഉപയോഗിക്കാമോ എന്ന് ഇത് നിയന്ത്രിക്കുന്നു. Google Search-ൽ ഒരു സൈറ്റ് ഉൾപ്പെടുന്നതിനെ ഇത് ബാധിക്കില്ലെന്ന് Google പറയുന്നു.
ഇതിനെ എങ്ങനെ അനുവദിക്കാം
User-agent: Google-Extended
Allow: / ഇതിനെ എങ്ങനെ തടയാം
User-agent: Google-Extended
Disallow: / ഇത് എന്തു ചെയ്യുന്നു
Google-Extended-ന് സ്വന്തമായി യൂസർ ഏജന്റില്ല. Google-ന്റെ നിലവിലുള്ള യൂസർ ഏജന്റുകളാണ് ക്രോൾ ചെയ്യുന്നത്; Google-Extended ടോക്കൺ ഒരു നിയന്ത്രണമായി മാത്രം പ്രവർത്തിക്കുന്നു: Google ക്രോൾ ചെയ്ത ഉള്ളടക്കം ഭാവി തലമുറ Gemini മോഡലുകളുടെ പരിശീലനത്തിനും Gemini Apps, Vertex AI എന്നിവയിലെ ഗ്രൗണ്ടിംഗിനും ഉപയോഗിക്കാമോ എന്ന് അത് Google-നോട് പറയുന്നു.
Google-Extended ഒരു സൈറ്റ് Google Search-ൽ ഉൾപ്പെടുന്നതിനെ ബാധിക്കില്ലെന്ന് Google വ്യക്തമാക്കുന്നു. AI Overviews പോലുള്ള Search-ലെ Google-ന്റെ AI ഫീച്ചറുകൾ നിയന്ത്രിക്കുന്നത് ഈ ടോക്കണല്ല, Googlebot നിയമങ്ങളും സ്നിപ്പറ്റ് നിയന്ത്രണങ്ങളുമാണ്.
ഞങ്ങളുടെ 2026-11 പഠനത്തിൽ, robots.txt ഉള്ള ജനപ്രിയ സൈറ്റുകളിൽ 18.1% ഇതിനെ തടഞ്ഞിരുന്നു. →
robots.txt ടോക്കൺ
Google-Extended
യഥാർത്ഥ സന്ദർശനങ്ങൾ എങ്ങനെ പരിശോധിച്ചുറപ്പിക്കാം
നിങ്ങളുടെ ലോഗുകളിൽ പരിശോധിച്ചുറപ്പിക്കാൻ ഒന്നുമില്ല: Google-Extended ഒരിക്കലും യൂസർ ഏജന്റായി പ്രത്യക്ഷപ്പെടില്ല. അതിന് പിന്നിലെ അഭ്യർത്ഥനകൾ Google-ന്റെ സാധാരണ ക്രോളറുകളിൽ നിന്നാണ് വരുന്നത്; റിവേഴ്സ് DNS ലുക്കപ്പും (googlebot.com, google.com അല്ലെങ്കിൽ googleusercontent.com) തുടർന്ന് ഫോർവേഡ് ലുക്കപ്പും വഴിയോ, Google പ്രസിദ്ധീകരിച്ച IP ശ്രേണികളുമായി ഒത്തുനോക്കിയോ അവ പരിശോധിച്ചുറപ്പിക്കാം.
നിങ്ങളുടെ സൈറ്റ് ഇതിനെ അകത്തേക്ക് കടത്തുന്നുണ്ടോ എന്ന് പരിശോധിക്കുക →
AI ക്രോളറുകൾക്കുള്ള robots.txt: എന്ത് അനുവദിക്കണം, എന്ത് തടയണം →