के Google-Extended ब्लक गर्दा तपाईं AI Overviews र AI Mode बाट हट्नुहुन्छ?
Google को कागजातअनुसार हट्नुहुन्न। Google-Extended ले तपाईंको सामग्री Gemini मोडेल ट्रेनिङ र Gemini Apps तथा Vertex AI मा grounding का लागि प्रयोग हुने कुरा नियन्त्रण गर्छ। AI Overviews र AI Mode ले Googlebot ले Search का लागि क्रल गरेका पेज प्रयोग गर्छन्। तिनलाई सीमित गर्न Google ले snippet नियन्त्रण, noindex, र साइटलाई यी सुविधाबाट बाहिर राख्ने Search Console सेटिङ औँल्याउँछ।
Google-Extended लाई प्रायः आफ्नो साइट Google को AI बाट बाहिर राख्ने उपाय भनिन्छ। यो आंशिक रूपमा मात्र सत्य हो, र यो खाडलले दुवैतर्फ भ्रम सिर्जना गर्छ: केही साइटले AI Overviews बाट हराउने आशामा यसलाई ब्लक गर्छन् र कुनै परिवर्तन देख्दैनन्, अरूले सर्च ट्राफिक गुम्ने डरले यसलाई छुँदैनन्। हरेक नियन्त्रणले के गर्छ भनेर Google कै कागजात निकै स्पष्ट छ। यहाँ त्यसले के भन्छ, पेजहरू कहाँ पूर्ण रूपमा मेल खाँदैनन्, र आफ्नो साइटमा के जाँच्ने भन्ने छ।
यस पेजमा
Google-Extended के हो?
Google ले Google-Extended लाई प्रकाशकले robots.txt मा प्रयोग गर्न सक्ने स्वतन्त्र product token भनेर वर्णन गर्छ। यसको आफ्नै क्रलर वा user agent string छैन; Google का अवस्थित क्रलरले पेज ल्याउँछन्, र टोकनले त्यो सामग्री कसरी प्रयोग गर्न सकिन्छ भन्ने नियन्त्रण गर्छ।
Google को क्रलर कागजातअनुसार यसले दुई प्रयोग समेट्छ: Gemini Apps र Gemini का लागि Vertex AI API चलाउने Gemini मोडेलका भावी पुस्ताको ट्रेनिङ, र grounding, अर्थात् Gemini Apps मा र Vertex AI को Grounding with Google Search मा prompt को समयमा मोडेललाई दिइने Google Search इन्डेक्सको सामग्री। उही पेज भन्छ Google-Extended ले साइटको Google Search मा समावेशलाई असर गर्दैन र र्याङ्किङ सङ्केतका रूपमा प्रयोग हुँदैन।
User-agent: Google-Extended
Disallow: / के Google-Extended ब्लक गर्दा AI Overviews वा AI Mode मा असर पर्छ?
Google को कागजातले Google-Extended ले नियन्त्रण गर्ने प्रयोगमा AI Overviews वा AI Mode राखेको छैन। AI सुविधाबारे Google को गाइड भन्छ, कुनै पेज इन्डेक्स भएको छ र Google Search मा snippet सहित देखाउन योग्य छ भने त्यो AI Overviews वा AI Mode मा सहायक लिंकका रूपमा देखिन योग्य हुन्छ, थप प्राविधिक आवश्यकता बिना। यसले Search मा क्रलिङको नियन्त्रणका रूपमा Google-Extended होइन, Googlebot का लागि robots.txt नियमलाई औँल्याउँछ।
त्यसैले Google को वर्णनअनुसार, Googlebot ले क्रल र इन्डेक्स गर्न सक्ने र snippet देखाउन सकिने पेज Google-Extended निषेध हुँदा पनि AI Overviews र AI Mode मा देखिन सक्छ।
एउटा सूक्ष्म कुरा स्पष्ट भन्नु उचित छ। Google को नयाँ AI नियन्त्रणबारेको Search Console सहायता पेज भन्छ, Search का generative AI सुविधामा उत्तर बनाउन प्रयोग हुने मोडेलको ट्रेनिङ सीमित गर्न Google-Extended प्रयोग गर्नुहोस्। टोकनबारेको Google को क्रलर कागजातले Gemini Apps र Vertex AI मात्र उल्लेख गर्छ। दुई पेजले दायरा फरक ढङ्गले वर्णन गर्छन्। कुनैले पनि टोकन ब्लक गर्दा साइट AI Overviews बाट हट्छ भन्दैन।
AI Overviews र AI Mode मा देखिने कुरा केले नियन्त्रण गर्छ?
Google ले यी नियन्त्रणको कागजात दिन्छ, सबैभन्दा साँघुरोदेखि सबैभन्दा फराकिलोसम्म:
nosnippet: Google भन्छ यो नियमले सामग्रीलाई AI Overviews र AI Mode को प्रत्यक्ष इनपुटका रूपमा प्रयोग हुनबाट पनि रोक्छ। यसले सर्च नतिजाको सामान्य पाठ snippet पनि हटाउँछ।max-snippet: लम्बाइको सीमा AI Overviews र AI Mode को प्रत्यक्ष इनपुटका रूपमा कति सामग्री प्रयोग गर्न सकिन्छ भन्नेमा पनि लागू हुन्छ।data-nosnippet: पेजका चिह्न लगाइएका भागलाई snippet बाट बाहिर राख्छ। यसबारे Google को कागजातले AI Overviews वा AI Mode विशेष रूपमा उल्लेख गर्दैन।- Search Console को Search generative AI सेटिङ: Include, Exclude र child property का लागि Inherit विकल्प भएको पूरै साइटको नियन्त्रण। बाहिर राखिएको सामग्री AI Overviews, AI Mode वा Discover का generative AI सुविधामा देखिँदैन, र तिनबाट कुनै ट्राफिक वा impression पाउँदैन। Google भन्छ यसले अगस्ट 31, 2026 सम्म यो नियन्त्रण विश्वभरका सबै वेबसाइटमा ल्यायो, बहिष्कार सामान्यतया 1 देखि 2 दिनभित्र लागू हुन्छ, र यो बाँकी Search का लागि र्याङ्किङ वा समावेशको सङ्केत होइन।
noindexवाGooglebotdisallow: यिनले पेजलाई Google Search बाटै पूरै हटाउँछन्, जसले AI सुविधाबाट पनि हटाउँछ।
Google यो पनि भन्छ कि AI Overviews वा AI Mode मा देखिन कुनै विशेष schema.org मार्कअप वा अन्य अप्टिमाइजेसन चाहिँदैन।
यसको सट्टा Googlebot ब्लक गरे के हुन्छ?
Googlebot ब्लक गर्नु सबैभन्दा कडा विकल्प हो। Google भन्छ यसलाई सम्बोधन गरिएका क्रल प्राथमिकताले Discover र सबै Search सुविधासहित Google Search मा असर गर्छन्। Googlebot निषेध गर्ने साइटले AI Overviews र AI Mode का उद्धरणसँगै सामान्य सर्च नतिजा पनि गुमाउँछ।
थोरै ठूला साइटले मात्र यसो गर्छन्। सबैभन्दा लोकप्रिय 1,000 डोमेनका robots.txt फाइलको हाम्रो अध्ययनमा, robots.txt भएका 518 साइटमध्ये 94 (18.1%) ले Google-Extended का लागि गृहपृष्ठ निषेध गरेका थिए, जबकि Googlebot का लागि 14 (2.7%) ले मात्र। अध्ययनले गृहपृष्ठका लागि robots.txt नियम मात्र समेट्छ, र ती साइटले नियमबाट के अपेक्षा गरेका थिए भन्ने देखाउन सक्दैन।
Google ले मेरो साइटमा के देख्छ कसरी जाँच्ने?
तपाईंका पेज AI Overviews वा AI Mode मा छैनन् भने सामान्य सर्च नतिजाका लागि जस्तै शृङ्खला क्रमशः जाँच्नुहोस्:
- इन्डेक्सिङ: पेज इन्डेक्स भएको र
Googlebotले ल्याउन सकेको पक्का गर्न Search Console को URL Inspection उपकरण प्रयोग गर्नुहोस्। - Snippet: पेजको robots meta ट्याग र
X-Robots-Tagहेडरमाnosnippet, सानोmax-snippetमान वाnoindexछ कि जाँच्नुहोस्। - Search Console को Search generative AI सेटिङ: आफ्नो domain property का लागि जाँच्नुहोस्, र child property ले पूर्वनिर्धारित रूपमा parent बाट सेटिङ लिन्छन् भन्ने सम्झनुहोस्।
- robots.txt:
Googlebotसमूहले, वाGooglebotसमूह नभए*समूहले, पेजलाई अनुमति दिन्छ भनी पक्का गर्नुहोस्।Google-Extendedसमूहले यसलाई बदल्दैन। - फायरवाल: तपाईंको CDN वा बट सुरक्षाले Google का क्रलरलाई ब्लक वा च्यालेन्ज गर्दैन भनी पक्का गर्नुहोस्। अनुमति दिनुअघि Googlebot लाई reverse DNS वा Google का प्रकाशित IP दायराबाट प्रमाणित गर्नुहोस्।
- रेन्डरिङ: Google ले JavaScript render गर्छ, तर सुरुको HTML मा पाठ हुनु अझै सबैभन्दा सुरक्षित छनोट हो, र धेरैजसो अन्य AI क्रलरलाई त्यही चाहिन्छ।
हरेक जाँच पास भए पनि हरेक query मा कुन पेज देखाउने भन्ने Google ले निर्णय गर्छ। योग्य हुनु र देखाइनु एउटै कुरा होइन।
AI Overviews बाट आएको ट्राफिक कहाँ देख्ने?
Google भन्छ AI सुविधामा देखिने साइटको ट्राफिक Search Console को Performance रिपोर्टमा समग्र सर्च ट्राफिकमै समावेश हुन्छ। 2026 का नियन्त्रणसँगै Google ले Search Console मा generative AI insights पनि घोषणा गर्यो, जसले impression र AI उत्तरमा कुन पेज देखिन्छन् देखाउँछ, र थप मेट्रिक आउने बतायो। तपाईं Google-Extended लाई आफ्नो सर्भर लगमा देख्न सक्नुहुन्न, किनभने यसको आफ्नै user agent छैन।
AISeeWhy ले तपाईंको robots.txt Googlebot र Google-Extended दुवैका लागि जाँच्छ, Google को क्रलरले ब्राउजरले जस्तै पेज पाउँछ कि पाउँदैन परीक्षण गर्छ, र पेजलाई AI Overviews र AI Mode बाट बाहिर राख्ने nosnippet र noindex नियम रिपोर्ट गर्छ।
अर्को कदम
- AI क्रलरका लागि robots.txt टेस्टर र चेकर
- AI क्रलर IP जाँच
- पूरा रिपोर्टको एउटा उदाहरण हेर्नुहोस्
- AI क्रलर निगरानी
- योजना र मूल्य
यस लेखमा भएका क्रलर
बारम्बार सोधिने प्रश्नहरू
के Google-Extended ब्लक गर्दा मेरो Google र्याङ्किङमा असर पर्छ?
Google भन्छ Google-Extended ले Google Search मा समावेशलाई असर गर्दैन र र्याङ्किङ सङ्केतका रूपमा प्रयोग हुँदैन।
Google Search मा रहँदै साइटलाई AI Overviews बाट कसरी बाहिर राख्ने?
Google ले Search Console मा Search generative AI सेटिङ दिन्छ, जसले बाँकी Search लाई असर नगरी साइटलाई AI Overviews, AI Mode र Discover का generative AI सुविधाबाट बाहिर राख्छ। nosnippet र max-snippet ले पनि प्रत्यक्ष इनपुटका रूपमा प्रयोग सीमित गर्छन्, तर तिनले सामान्य snippet पनि बदल्छन्।
के Search Console को AI सेटिङले AI ट्रेनिङ रोक्छ?
रोक्दैन। Google को सहायता पेज भन्छ यो सेटिङले ट्रेनिङ समेट्दैन र त्यसका लागि Google-Extended औँल्याउँछ।
AI Overviews मा देखिन के विशेष मार्कअप चाहिन्छ?
Google भन्छ कुनै थप आवश्यकता वा विशेष schema.org संरचित डेटा चाहिँदैन। पेज इन्डेक्स भएको र snippet देखाउन योग्य हुनुपर्छ।
के Google-Extended क्रलर हो जसलाई म फायरवालमा ब्लक गर्न सक्छु?
होइन। यसको आफ्नै user agent छैन, त्यसैले फायरवालले यसलाई देख्न सक्दैन। यो robots.txt टोकनका रूपमा मात्र काम गर्छ। Google का वास्तविक क्रलरलाई फायरवालमा ब्लक गर्दा Search मा असर पर्छ।
स्रोतहरू
- Google: Google-Extended सहित साझा क्रलरहरू
- Google Search Central: AI सुविधा र तपाईंको वेबसाइट
- Google Search Central: Robots meta ट्याग, data-nosnippet र X-Robots-Tag
- Google Search Console सहायता: Search generative AI नियन्त्रण
- Google: वेबसाइट मालिकका लागि नयाँ अवसर, नियन्त्रण र insights
- Google: Google क्रलर र फेचर प्रमाणित गर्ने
- Google Search Central: JavaScript SEO का आधारभूत कुरा
- AISeeWhy: AI क्रलर पहुँच रिपोर्ट, 2026-11