Google-Extended

Google · AI ತರಬೇತಿ

Google-Extended ಎಂಬುದು robots.txt ಟೋಕನ್, ಪ್ರತ್ಯೇಕ ಕ್ರಾಲರ್ ಅಲ್ಲ. Google ಕ್ರಾಲ್ ಮಾಡಿದ ವಿಷಯವನ್ನು ಭವಿಷ್ಯದ Gemini ಮಾದರಿಗಳ ತರಬೇತಿಗೆ ಮತ್ತು Gemini Apps ಹಾಗೂ Vertex AI ನಲ್ಲಿ grounding ಗೆ ಬಳಸಬಹುದೇ ಎಂದು ಇದು ನಿಯಂತ್ರಿಸುತ್ತದೆ. ಇದು Google Search ನಲ್ಲಿ ಸೈಟ್‌ನ ಸೇರ್ಪಡೆಯ ಮೇಲೆ ಪರಿಣಾಮ ಬೀರುವುದಿಲ್ಲ ಎಂದು Google ಹೇಳುತ್ತದೆ.

ಇದನ್ನು ಹೇಗೆ ಅನುಮತಿಸುವುದು

User-agent: Google-Extended
Allow: /

ಇದನ್ನು ಹೇಗೆ ತಡೆಯುವುದು

User-agent: Google-Extended
Disallow: /

ಇದು ಏನು ಮಾಡುತ್ತದೆ

Google-Extended ಗೆ ತನ್ನದೇ user agent ಇಲ್ಲ. ಕ್ರಾಲಿಂಗ್ ಅನ್ನು Google ನ ಈಗಿರುವ user agent ಗಳಿಂದ ಮಾಡಲಾಗುತ್ತದೆ, ಮತ್ತು Google-Extended ಟೋಕನ್ ಅನ್ನು ನಿಯಂತ್ರಣಕ್ಕಾಗಿ ಬಳಸಲಾಗುತ್ತದೆ: Google ಕ್ರಾಲ್ ಮಾಡಿದ ವಿಷಯವನ್ನು Gemini ಮಾದರಿಗಳ ಭವಿಷ್ಯದ ಪೀಳಿಗೆಗಳ ತರಬೇತಿಗೆ ಮತ್ತು Gemini Apps ಹಾಗೂ Vertex AI ನಲ್ಲಿ grounding ಗೆ ಬಳಸಬಹುದೇ ಎಂದು ಅದು Google ಗೆ ತಿಳಿಸುತ್ತದೆ.

Google-Extended Google Search ನಲ್ಲಿ ಸೈಟ್‌ನ ಸೇರ್ಪಡೆಯ ಮೇಲೆ ಪರಿಣಾಮ ಬೀರುವುದಿಲ್ಲ ಎಂದು Google ತಿಳಿಸುತ್ತದೆ. AI Overviews ನಂತಹ Search ನಲ್ಲಿನ Google ನ AI ವೈಶಿಷ್ಟ್ಯಗಳನ್ನು ಈ ಟೋಕನ್ ಅಲ್ಲ, Googlebot ನಿಯಮಗಳು ಮತ್ತು snippet ನಿಯಂತ್ರಣಗಳು ನಿರ್ವಹಿಸುತ್ತವೆ.

ನಮ್ಮ 2026-11 ಅಧ್ಯಯನದಲ್ಲಿ, robots.txt ಇರುವ ಜನಪ್ರಿಯ ಸೈಟ್‌ಗಳಲ್ಲಿ 18.1% ಇದನ್ನು ತಡೆದಿದ್ದವು. →

robots.txt ಟೋಕನ್

Google-Extended

ನಿಜವಾದ ಭೇಟಿಗಳನ್ನು ಹೇಗೆ ಪರಿಶೀಲಿಸುವುದು

ನಿಮ್ಮ ಲಾಗ್‌ಗಳಲ್ಲಿ ಪರಿಶೀಲಿಸಲು ಏನೂ ಇಲ್ಲ: Google-Extended ಎಂದಿಗೂ user agent ಆಗಿ ಕಾಣಿಸುವುದಿಲ್ಲ. ಅದರ ಹಿಂದಿನ ವಿನಂತಿಗಳು Google ನ ಸಾಮಾನ್ಯ ಕ್ರಾಲರ್‌ಗಳಿಂದ ಬರುತ್ತವೆ, ಅವನ್ನು reverse DNS lookup (googlebot.com, google.com ಅಥವಾ googleusercontent.com) ಮತ್ತು ನಂತರ forward lookup ಮೂಲಕ, ಅಥವಾ Google ನ ಪ್ರಕಟಿತ IP ಶ್ರೇಣಿಗಳೊಂದಿಗೆ ಪರಿಶೀಲಿಸಬಹುದು.

ನಿಮ್ಮ ಸೈಟ್ ಇದನ್ನು ಒಳಗೆ ಬಿಡುತ್ತದೆಯೇ ಎಂದು ಪರಿಶೀಲಿಸಿ →

AI ಕ್ರಾಲರ್‌ಗಳಿಗೆ robots.txt: ಏನನ್ನು ಅನುಮತಿಸಬೇಕು, ಏನನ್ನು ತಡೆಯಬೇಕು →