ამოგიღებთ თუ არა Google-Extended-ის დაბლოკვა AI Overviews-იდან და AI Mode-იდან?
Google-ის დოკუმენტაციის მიხედვით, არა. Google-Extended მართავს თქვენი კონტენტის გამოყენებას Gemini-ის მოდელების სწავლებისა და Gemini Apps-სა და Vertex AI-ში grounding-ისთვის. AI Overviews და AI Mode იყენებს გვერდებს, რომლებსაც Googlebot Search-ისთვის აგროვებს. მათი შესაზღუდად Google მიუთითებს ფრაგმენტების პარამეტრებზე, noindex-ზე და Search Console-ის პარამეტრზე, რომელიც საიტს ამ ფუნქციებიდან გამორიცხავს.
Google-Extended-ს ხშირად აღწერენ, როგორც საიტის Google-ის AI-სგან დაცვის საშუალებას. ეს მხოლოდ ნაწილობრივ არის მართალი, და ეს სხვაობა ორივე მიმართულებით იწვევს დაბნეულობას: ზოგი საიტი მას ბლოკავს იმ მოლოდინით, რომ AI Overviews-იდან გაქრება, და ცვლილებას ვერ ხედავს, ზოგი კი ერიდება მას ძიების ტრაფიკის დაკარგვის შიშით. Google-ის საკუთარი დოკუმენტაცია საკმაოდ კონკრეტულად აღწერს, რას აკეთებს თითოეული პარამეტრი. აი, რას ამბობს ის, სად არ არის გვერდები ბოლომდე თანმიმდევრული და რა უნდა შეამოწმოთ თქვენს საიტზე.
ამ გვერდზე
- რა არის Google-Extended?
- მოქმედებს თუ არა Google-Extended-ის დაბლოკვა AI Overviews-სა ან AI Mode-ზე?
- რა განსაზღვრავს რეალურად, გამოჩნდებით თუ არა AI Overviews-სა და AI Mode-ში?
- რა მოხდება, თუ ამის ნაცვლად Googlebot-ს დავბლოკავ?
- როგორ შევამოწმო, რას ხედავს Google ჩემს საიტზე?
- სად ვნახო AI Overviews-ის ტრაფიკი?
რა არის Google-Extended?
Google Google-Extended-ს აღწერს, როგორც დამოუკიდებელ პროდუქტის ტოკენს, რომელიც გამომცემლებს robots.txt-ში შეუძლიათ გამოიყენონ. მას არც კრაულერი აქვს და არც საკუთარი user agent სტრიქონი; გვერდებს Google-ის არსებული კრაულერები იღებენ, ტოკენი კი მართავს, როგორ შეიძლება ამ კონტენტის გამოყენება.
Google-ის კრაულერების დოკუმენტაციის მიხედვით, ის ორ გამოყენებას მოიცავს: Gemini-ის მოდელების მომავალი თაობების სწავლებას, რომლებიც Gemini Apps-სა და Gemini-ის Vertex AI API-ს ამუშავებს, და grounding-ს, ანუ Google Search-ის ინდექსიდან კონტენტის მიწოდებას მოდელისთვის მოთხოვნის დროს, Gemini Apps-სა და Vertex AI-ის Grounding with Google Search-ში. იმავე გვერდზე წერია, რომ Google-Extended საიტის Google Search-ში ჩართვაზე გავლენას არ ახდენს და რანჟირების სიგნალად არ გამოიყენება.
User-agent: Google-Extended
Disallow: / მოქმედებს თუ არა Google-Extended-ის დაბლოკვა AI Overviews-სა ან AI Mode-ზე?
Google-ის დოკუმენტაცია AI Overviews-სა და AI Mode-ს არ ასახელებს იმ გამოყენებებს შორის, რომლებსაც Google-Extended მართავს. Google-ის სახელმძღვანელო AI ფუნქციების შესახებ ამბობს, რომ გვერდს შეუძლია გამოჩნდეს დამხმარე ბმულად AI Overviews-სა ან AI Mode-ში, თუ ის ინდექსირებულია და Google Search-ში ფრაგმენტით ჩვენებას აკმაყოფილებს, დამატებითი ტექნიკური მოთხოვნების გარეშე. Search-ში კრაულინგის მართვის საშუალებად ის Googlebot-ის robots.txt-ის წესებს ასახელებს და არა Google-Extended-ს.
ასე რომ, Google-ის აღწერით, გვერდი, რომლის კრაულინგი და ინდექსირებაც Googlebot-ს შეუძლია და რომელსაც შეიძლება ფრაგმენტი ჰქონდეს, მაინც შეიძლება გამოჩნდეს AI Overviews-სა და AI Mode-ში, როცა Google-Extended აკრძალულია.
არის ერთი ნიუანსი, რომელიც პირდაპირ უნდა ითქვას. Google-ის Search Console-ის დახმარების გვერდი მისი ახალი AI პარამეტრის შესახებ ამბობს, რომ Search-ის გენერაციულ AI ფუნქციებში პასუხების შესაქმნელად გამოყენებული მოდელების სწავლების შესაზღუდად Google-Extended უნდა გამოიყენოთ. Google-ის კრაულერების დოკუმენტაცია ამ ტოკენზე მხოლოდ Gemini Apps-სა და Vertex AI-ს ახსენებს. ორი გვერდი მის მოქმედების სფეროს სხვადასხვაგვარად აღწერს. არცერთი არ ამბობს, რომ ტოკენის დაბლოკვა საიტს AI Overviews-იდან ამოიღებს.
რა განსაზღვრავს რეალურად, გამოჩნდებით თუ არა AI Overviews-სა და AI Mode-ში?
Google ამ პარამეტრებს აღწერს, ყველაზე ვიწროდან ყველაზე ფართომდე:
nosnippet: Google-ის თქმით, ეს წესი ასევე კრძალავს კონტენტის პირდაპირ გამოყენებას AI Overviews-სა და AI Mode-ისთვის. ის ასევე შლის ჩვეულებრივ ტექსტურ ფრაგმენტს ძიების შედეგებში.max-snippet: სიგრძის ლიმიტი ასევე ვრცელდება იმაზე, კონტენტის რა მოცულობა შეიძლება პირდაპირ მიეწოდოს AI Overviews-სა და AI Mode-ს.data-nosnippet: გვერდის მონიშნულ ნაწილებს ფრაგმენტებიდან გამორიცხავს. Google-ის დოკუმენტაცია მასზე AI Overviews-სა და AI Mode-ს კონკრეტულად არ ახსენებს.- Search Console-ის Search generative AI პარამეტრი: მთელი საიტის პარამეტრი Include, Exclude და, შვილობილი რესურსებისთვის, Inherit ვარიანტებით. გამორიცხული კონტენტი არ ჩანს AI Overviews-ში, AI Mode-ში ან Discover-ის გენერაციულ AI ფუნქციებში და მათგან არც ტრაფიკს იღებს და არც ჩვენებებს. Google-ის თქმით, პარამეტრი 2026 წლის 31 აგვისტოსთვის მსოფლიოს ყველა საიტისთვის გავრცელდა, გამორიცხვა, როგორც წესი, 1–2 დღეში ამოქმედდება და ის Search-ის დანარჩენი ნაწილისთვის რანჟირების ან ჩართვის სიგნალი არ არის.
noindexანGooglebot-ის აკრძალვა: ისინი გვერდს Google Search-იდან მთლიანად იღებენ, რაც მას AI ფუნქციებიდანაც აშორებს.
Google ასევე ამბობს, რომ AI Overviews-სა ან AI Mode-ში გამოსაჩენად schema.org-ის სპეციალური მარკირება ან სხვა ოპტიმიზაცია საჭირო არ არის.
რა მოხდება, თუ ამის ნაცვლად Googlebot-ს დავბლოკავ?
Googlebot-ის დაბლოკვა ყველაზე უხეში ვარიანტია. Google-ის თქმით, მისთვის განკუთვნილი კრაულინგის წესები მოქმედებს Google Search-ზე, მათ შორის Discover-სა და Search-ის ყველა ფუნქციაზე. საიტი, რომელიც Googlebot-ს კრძალავს, ძიების ჩვეულებრივ შედეგებსაც კარგავს და AI Overviews-სა და AI Mode-ში ციტირებასაც.
დიდი საიტებიდან ამას ცოტა აკეთებს. 1000 ყველაზე პოპულარული დომენის robots.txt ფაილების ჩვენს კვლევაში robots.txt-ის მქონე 518 საიტიდან 94-მა (18,1%) მთავარი გვერდი Google-Extended-ისთვის აკრძალა, Googlebot-ისთვის კი მხოლოდ 14-მა (2,7%). კვლევა მხოლოდ მთავარი გვერდისთვის robots.txt-ის წესებს მოიცავს და ვერ აჩვენებს, რას ელოდნენ ეს საიტები წესისგან.
როგორ შევამოწმო, რას ხედავს Google ჩემს საიტზე?
თუ თქვენი გვერდები AI Overviews-სა ან AI Mode-ში არ ჩანს, გაიარეთ იგივე ჯაჭვი, რაც ძიების ჩვეულებრივი შედეგებისთვის:
- ინდექსირება: Search Console-ში URL Inspection ხელსაწყოთი დარწმუნდით, რომ გვერდი ინდექსირებულია და
Googlebot-მა მისი მიღება შეძლო. - ფრაგმენტები: შეამოწმეთ გვერდის robots meta თეგი და
X-Robots-Tagჰედერიnosnippet-ზე,max-snippet-ის მცირე მნიშვნელობაზე ანnoindex-ზე. - Search Console-ის Search generative AI პარამეტრი: შეამოწმეთ ის თქვენი დომენის რესურსისთვის და გახსოვდეთ, რომ შვილობილი რესურსები ნაგულისხმევად მშობლისგან იღებენ პარამეტრს.
- robots.txt: დარწმუნდით, რომ
Googlebot-ის ჯგუფი, ან*ჯგუფი, თუGooglebot-ის ჯგუფი არ არის, გვერდს უშვებს.Google-Extended-ის ჯგუფი ამას არ ცვლის. - ფაირვოლი: დარწმუნდით, რომ თქვენი CDN ან ბოტებისგან დაცვა Google-ის კრაულერებს არ ბლოკავს და შემოწმებას არ უგზავნის. დაშვებამდე Googlebot გადაამოწმეთ reverse DNS-ით ან Google-ის გამოქვეყნებული IP დიაპაზონებით.
- რენდერინგი: Google JavaScript-ს არენდერებს, მაგრამ ტექსტი საწყის HTML-ში მაინც ყველაზე უსაფრთხო არჩევანია და სწორედ ეს სჭირდება სხვა AI კრაულერების უმეტესობას.
მაშინაც კი, როცა ყველა შემოწმება გავლილია, Google თავად წყვეტს, რომელი გვერდები აჩვენოს თითოეულ მოთხოვნაზე. ჩვენების უფლება ჯერ კიდევ ჩვენებას არ ნიშნავს.
სად ვნახო AI Overviews-ის ტრაფიკი?
Google-ის თქმით, AI ფუნქციებში გამოჩენილი საიტების ტრაფიკი Search Console-ის Performance რეპორტში ძიების საერთო ტრაფიკშია ჩართული. 2026 წლის პარამეტრებთან ერთად Google-მა Search Console-ში გენერაციული AI-ის ანალიტიკაც გამოაცხადა, რომელიც აჩვენებს ჩვენებებს და იმას, რომელი გვერდები ჩანს AI პასუხებში, და თქვა, რომ მეტი მეტრიკა მოგვიანებით დაემატება. Google-Extended-ს სერვერის ლოგებში ვერ ნახავთ, რადგან მას საკუთარი user agent არ აქვს.
AISeeWhy ამოწმებს თქვენს robots.txt-ს როგორც Googlebot-ისთვის, ისე Google-Extended-ისთვის, ტესტავს, იღებს თუ არა Google-ის კრაულერი იმავე გვერდს, რასაც ბრაუზერი, და გაცნობებთ nosnippet და noindex წესების შესახებ, რომლებიც გვერდს AI Overviews-სა და AI Mode-ს გარეთ დატოვებდა.
შემდეგი ნაბიჯები
- robots.txt-ის ტესტერი და შემმოწმებელი AI კრაულერებისთვის
- AI კრაულერების IP შემოწმება
- ნახეთ სრული რეპორტის მაგალითი
- AI კრაულერების მონიტორინგი
- გეგმები და ფასები
ამ სტატიაში ნახსენები კრაულერები
ხშირად დასმული კითხვები
დააზიანებს თუ არა Google-Extended-ის დაბლოკვა ჩემს პოზიციებს Google-ში?
Google-ის თქმით, Google-Extended Google Search-ში ჩართვაზე გავლენას არ ახდენს და რანჟირების სიგნალად არ გამოიყენება.
როგორ დავტოვო საიტი AI Overviews-ის გარეთ და დავრჩე Google Search-ში?
Google Search Console-ში გთავაზობთ Search generative AI პარამეტრს, რომელიც საიტს AI Overviews-იდან, AI Mode-იდან და Discover-ის გენერაციული AI ფუნქციებიდან გამორიცხავს Search-ის დანარჩენ ნაწილზე გავლენის გარეშე. nosnippet და max-snippet ასევე ზღუდავს პირდაპირ გამოყენებას, მაგრამ ისინი ჩვეულებრივ ფრაგმენტებსაც ცვლის.
აჩერებს თუ არა Search Console-ის AI პარამეტრი AI სწავლებას?
არა. Google-ის დახმარების გვერდის თქმით, პარამეტრი სწავლებას არ მოიცავს და ამისთვის Google-Extended-ზე მიუთითებს.
მჭირდება თუ არა სპეციალური მარკირება AI Overviews-ში გამოსაჩენად?
Google-ის თქმით, არც დამატებითი მოთხოვნებია და არც schema.org-ის სპეციალური სტრუქტურირებული მონაცემებია საჭირო. გვერდი უნდა იყოს ინდექსირებული და ფრაგმენტით ჩვენების პირობებს აკმაყოფილებდეს.
არის თუ არა Google-Extended კრაულერი, რომლის დაბლოკვაც ფაირვოლში შემიძლია?
არა. მას საკუთარი user agent არ აქვს, ამიტომ ფაირვოლი მას ვერ ხედავს. ის მხოლოდ robots.txt-ის ტოკენად მუშაობს. Google-ის რეალური კრაულერების ფაირვოლში დაბლოკვა Search-ზე იმოქმედებდა.
წყაროები
- Google: ზოგადი კრაულერები, მათ შორის Google-Extended
- Google Search Central: AI ფუნქციები და თქვენი ვებსაიტი
- Google Search Central: robots meta თეგი, data-nosnippet და X-Robots-Tag
- Google Search Console-ის დახმარება: Search-ის გენერაციული AI-ის პარამეტრი
- Google: ახალი შესაძლებლობები, კონტროლი და ანალიტიკა ვებსაიტების მფლობელებისთვის
- Google: Google-ის კრაულერებისა და ფეტჩერების გადამოწმება
- Google Search Central: JavaScript SEO-ს საფუძვლები
- AISeeWhy: AI კრაულერების წვდომის ანგარიში, 2026-11