AISeeWhy
HE
התחלת ניסיון חינם

האם חסימת Google-Extended מוציאה אתכם מ-AI Overviews ומ-AI Mode?

פורסם

תשובה קצרה

לא, לפי התיעוד של Google. Google-Extended שולט בשימוש בתוכן שלכם לאימון מודלי Gemini ולעיגון (grounding) ב-Gemini Apps וב-Vertex AI. AI Overviews ו-AI Mode משתמשים בעמודים ש-Googlebot סורק עבור החיפוש. כדי להגביל אותם, Google מפנה לבקרות קטעי טקסט (snippets), ל-noindex ולהגדרה ב-Search Console שמוציאה אתר מהתכונות האלה.

Google-Extended מתואר לעיתים קרובות כדרך להרחיק את האתר שלכם מה-AI של Google. זה נכון רק בחלקו, והפער יוצר בלבול בשני הכיוונים: יש אתרים שחוסמים אותו בציפייה להיעלם מ-AI Overviews ולא רואים שינוי, ויש שנמנעים ממנו מחשש לאבד תעבורת חיפוש. התיעוד של Google עצמה די ספציפי לגבי מה כל בקרה עושה. הנה מה שהוא אומר, איפה העמודים לא עקביים לגמרי, ומה כדאי לבדוק באתר שלכם.

בעמוד זה
  1. מה זה Google-Extended?
  2. האם חסימת Google-Extended משפיעה על AI Overviews או על AI Mode?
  3. מה קובע אם אתם מופיעים ב-AI Overviews וב-AI Mode?
  4. ומה קורה אם חוסמים את Googlebot במקום?
  5. איך בודקים מה Google רואה באתר?
  6. איפה רואים תעבורה מ-AI Overviews?

מה זה Google-Extended?

Google מתארת את Google-Extended כטוקן מוצר עצמאי שמפרסמים יכולים להשתמש בו ב-robots.txt. אין לו סורק ואין לו מחרוזת user agent משלו; הסורקים הקיימים של Google מביאים את העמודים, והטוקן שולט באופן שבו מותר להשתמש בתוכן הזה.

לפי התיעוד של Google על הסורקים, הוא מכסה שני שימושים: אימון הדורות הבאים של מודלי Gemini שמפעילים את Gemini Apps ואת ה-API של Vertex AI עבור Gemini, ועיגון (grounding), כלומר תוכן מאינדקס החיפוש של Google שנמסר למודל בזמן ההנחיה, ב-Gemini Apps וב-Grounding with Google Search ב-Vertex AI. אותו עמוד אומר ש-Google-Extended לא משפיע על הכללת אתר בחיפוש Google ולא משמש אות דירוג.

User-agent: Google-Extended
Disallow: /

האם חסימת Google-Extended משפיעה על AI Overviews או על AI Mode?

התיעוד של Google לא מונה את AI Overviews או את AI Mode בין השימושים ש-Google-Extended שולט בהם. המדריך של Google לתכונות AI אומר שעמוד כשיר להופיע כקישור תומך ב-AI Overviews או ב-AI Mode אם הוא מאונדקס וכשיר להצגה בחיפוש Google עם קטע טקסט, בלי דרישות טכניות נוספות. הוא מציין כללי robots.txt עבור Googlebot, לא עבור Google-Extended, כבקרה על סריקה בחיפוש.

לכן, לפי התיאור של Google, עמוד ש-Googlebot רשאי לסרוק ולאנדקס, ושמותר להציג ממנו קטע טקסט, יכול עדיין להופיע ב-AI Overviews וב-AI Mode גם כש-Google-Extended חסום.

יש הסתייגות אחת שכדאי לומר במפורש. עמוד העזרה של Search Console של Google על הבקרה החדשה שלה ל-AI אומר שכדי להגביל אימון של המודלים המשמשים ליצירת תשובות בתכונות ה-AI היוצרות של החיפוש, יש להשתמש ב-Google-Extended. התיעוד של Google על הסורקים עבור הטוקן מזכיר רק את Gemini Apps ואת Vertex AI. שני העמודים מתארים את ההיקף באופן שונה. אף אחד מהם לא אומר שחסימת הטוקן מוציאה אתר מ-AI Overviews.

מה קובע אם אתם מופיעים ב-AI Overviews וב-AI Mode?

Google מתעדת את הבקרות האלה, מהצרה ביותר לרחבה ביותר:

Google אומרת גם שאין צורך בסימון schema.org מיוחד או באופטימיזציה אחרת כדי להופיע ב-AI Overviews או ב-AI Mode.

ומה קורה אם חוסמים את Googlebot במקום?

חסימת Googlebot היא האפשרות הגסה ביותר. Google אומרת שהעדפות סריקה שמופנות אליו משפיעות על חיפוש Google, כולל Discover וכל תכונות החיפוש. אתר שחוסם את Googlebot מאבד את תוצאות החיפוש הרגילות שלו יחד עם הציטוטים שלו ב-AI Overviews וב-AI Mode.

אתרים גדולים מעטים עושים זאת. במחקר שלנו על קובצי robots.txt של 1,000 הדומיינים הפופולריים ביותר, 94 מתוך 518 האתרים עם robots.txt (18.1%) חסמו את דף הבית עבור Google-Extended, ורק 14 (2.7%) עשו זאת עבור Googlebot. המחקר מכסה רק כללי robots.txt לדף הבית, והוא לא יכול להראות מה האתרים האלה ציפו שהכלל יעשה.

איך בודקים מה Google רואה באתר?

אם העמודים שלכם חסרים ב-AI Overviews או ב-AI Mode, עברו על אותה שרשרת כמו בתוצאות חיפוש רגילות:

גם כשכל הבדיקות עוברות, Google מחליטה אילו עמודים להציג לכל שאילתה. להיות כשיר זה לא אותו דבר כמו להיות מוצג.

איפה רואים תעבורה מ-AI Overviews?

Google אומרת שתעבורה מאתרים שמופיעים בתכונות AI נכללת בתעבורת החיפוש הכוללת בדוח Performance של Search Console. יחד עם בקרות 2026 Google הכריזה גם על תובנות AI יוצר ב-Search Console, שמראות חשיפות ואילו עמודים מופיעים בתשובות AI, ואמרה שיבואו מדדים נוספים. אי אפשר לראות את Google-Extended בלוגי השרת, כי אין לו user agent משלו.

AISeeWhy בודק את ה-robots.txt שלכם עבור Googlebot ועבור Google-Extended, בודק אם הסורק של Google מקבל את אותו עמוד שמקבל דפדפן, ומדווח על כללי nosnippet ו-noindex שיחזיקו עמוד מחוץ ל-AI Overviews ול-AI Mode.

שאלות נפוצות

האם חסימת Google-Extended תפגע בדירוג שלי בגוגל?

Google אומרת ש-Google-Extended לא משפיע על הכללה בחיפוש Google ואינו משמש אות דירוג.

איך להשאיר את האתר מחוץ ל-AI Overviews ובכל זאת בחיפוש Google?

Google מציעה הגדרת Search generative AI ב-Search Console שמוציאה אתר מ-AI Overviews, מ-AI Mode ומתכונות AI יוצרות ב-Discover בלי להשפיע על שאר החיפוש. גם nosnippet ו-max-snippet מגבילים שימוש כקלט ישיר, אבל הם משנים גם את קטעי הטקסט הרגילים.

האם ההגדרה של AI ב-Search Console עוצרת אימון של AI?

לא. עמוד העזרה של Google אומר שההגדרה לא מכסה אימון, ומפנה ל-Google-Extended לשם כך.

האם צריך סימון מיוחד כדי להופיע ב-AI Overviews?

Google אומרת שאין דרישות נוספות ושאין צורך בנתונים מובנים מיוחדים של schema.org. העמוד צריך להיות מאונדקס וכשיר להצגת קטע טקסט.

האם Google-Extended הוא סורק שאפשר לחסום בחומת האש?

לא. אין לו user agent משלו, ולכן חומת אש לא יכולה לראות אותו. הוא פועל רק כטוקן של robots.txt. חסימת הסורקים האמיתיים של Google בחומת האש הייתה משפיעה על החיפוש.

מקורות

מאמרים נוספים