Czy Gemini widzi moją stronę? Jak to sprawdzić
Gemini może użyć Twojej strony w odpowiedzi opartej na wyszukiwarce (grounding) tylko wtedy, gdy strona jest w indeksie wyszukiwarki Google, a Twój robots.txt nie blokuje tokenu Google-Extended. Google podaje, że grounding w aplikacji Gemini dostarcza modelowi treści z indeksu wyszukiwarki Google i że Google-Extended decyduje, czy Twoje treści mogą być do tego użyte. Sprawdź więc indeksowanie w Search Console, sprawdź robots.txt pod kątem Googlebot i Google-Extended, a potem zadaj Gemini pytania swoich klientów i otwórz źródła.
Gemini nie ma własnego crawlera, którego można wypatrywać w logach, jak w przypadku innych asystentów. Google przeszukuje sieć swoimi istniejącymi crawlerami, a token w robots.txt decyduje, co Gemini może zrobić z treścią. Dlatego sprawdzanie wygląda inaczej: większość odbywa się w Google Search Console i w Twoim robots.txt, a ostatni krok w samym Gemini.
Na tej stronie
- Sprawdzenie w 5 minut, krok po kroku
- Jak Gemini pobiera informacje ze stron internetowych?
- Jak sprawdzić, czy Google zaindeksował moją stronę?
- Czy Google-Extended blokuje Gemini dostęp do mojej strony?
- Czy firewall może blokować Google, przepuszczając przeglądarki?
- Jak sprawdzić, czy Gemini używa lub cytuje moją stronę?
- Czy AI Overviews, AI Mode i reguły fragmentów wpływają na Gemini?
- Jak sprawdza to AISeeWhy
Sprawdzenie w 5 minut, krok po kroku
- Wyszukaj w Google
site:z adresem swojej strony albo użyj sprawdzania adresu URL w Search Console, aby potwierdzić, że strona jest w indeksie Google. - Otwórz swój robots.txt i upewnij się, że
Googlebotmoże pobrać stronę, aGoogle-Extendednie jest zablokowany, chyba że świadomie z tego zrezygnowałeś. - Uruchom darmowe sprawdzenie strony w AISeeWhy albo wyślij jedno żądanie z user agentem
Googlebot: musi dostać status 200 i ten sam tekst co przeglądarka. - Zadaj Gemini pytanie, na które odpowiada Twoja strona, i otwórz źródła, które pokazuje pod odpowiedzią.
Jeśli strona nie jest zaindeksowana, grounding Gemini nie może jej użyć, więc zacznij od kroku 1. Sekcje poniżej wyjaśniają każdy krok i co zrobić, gdy się nie powiedzie.
Jak Gemini pobiera informacje ze stron internetowych?
Gemini Apps Privacy Hub od Google podaje, że niektóre odpowiedzi Gemini są oparte (grounded) na wynikach wyszukiwania. Dokumentacja crawlerów Google definiuje grounding jako dostarczanie modelowi treści z indeksu wyszukiwarki Google w momencie promptu, aby poprawić zgodność z faktami i trafność. Ta sama strona podaje, że Google-Extended decyduje, czy treści przeszukane przez Google mogą być użyte do trenowania modeli Gemini oraz do groundingu w aplikacjach Gemini i w Grounding with Google Search w Vertex AI.
Google-Extended nie ma własnego ciągu user agenta. Google podaje, że przeszukiwanie odbywa się przy użyciu istniejących user agentów, a token działa wyłącznie jako ustawienie w robots.txt. W praktyce daje to dwa warunki, by Gemini mógł użyć Twojej strony: Google musi mieć ją w indeksie, a Twój robots.txt nie może blokować dla niej Google-Extended.
Google nie opisuje, jak Gemini wybiera, których zaindeksowanych stron użyć lub które zacytować. Spełnienie obu warunków udostępnia Twoją stronę; nie gwarantuje, że Gemini ją wybierze.
Jak sprawdzić, czy Google zaindeksował moją stronę?
Użyj narzędzia Sprawdzanie adresu URL w Google Search Console. Dla zaindeksowanej wersji pokazuje ono:
- Czy strona jest zaindeksowana, albo powód w rodzaju „Adres URL nie jest znany Google”.
- Datę ostatniego skanowania i to, czy Google skanował jako użytkownik komputera, czy urządzenia mobilnego.
- Czy pobranie strony się powiodło i czy robots.txt zezwolił na skanowanie.
- Zadeklarowany przez Ciebie adres kanoniczny i adres kanoniczny wybrany przez Google. Jeśli się różnią, Google traktuje swój wybór jako wiarygodną wersję strony.
Test wersji opublikowanej pobiera stronę w czasie rzeczywistym, a Wyświetl przetestowaną stronę pokazuje zrzut ekranu i HTML, który otrzymał Google. Jeśli na zrzucie jest strona weryfikacji albo w HTML brakuje głównego tekstu, Google, a razem z nim Gemini, nie widzi Twoich treści. Poproś o zindeksowanie prosi Google o ponowne przeskanowanie adresu; według Google trwa to zwykle około doby, bez gwarancji zaindeksowania.
Czy Google-Extended blokuje Gemini dostęp do mojej strony?
Otwórz robots.txt i poszukaj grupy, która wymienia Google-Extended. Disallow: / w tej grupie mówi Google, by nie używał Twoich stron do trenowania Gemini ani do groundingu w aplikacjach Gemini. Google podaje, że token nie wpływa na obecność w wyszukiwarce Google i nie jest sygnałem rankingowym, więc łatwo przeoczyć tę blokadę: ruch z wyszukiwarki wygląda normalnie, a Gemini nie może opierać odpowiedzi na Twoich stronach. Nasz osobny artykuł o AI Overviews i Google-Extended opisuje, co token kontroluje w wyszukiwarce, a czego nie.
Ponieważ token nigdy nie pojawia się w żądaniach, nie przetestujesz go przez curl ani nie znajdziesz w logach. Jedynym sprawdzeniem jest przeczytanie pliku:
# Show the Google-Extended and Googlebot groups with the lines after them
curl -s https://example.com/robots.txt | grep -n -i -A4 -E "^user-agent: *(google-extended|googlebot)"
# The * group applies to any token without its own group
curl -s https://example.com/robots.txt | grep -n -i -A4 "^user-agent: \*" Dopasowanie nie rozróżnia wielkości liter, a jeśli żadna grupa nie wymienia Google-Extended, ma do niego zastosowanie grupa *. Wiele witryn dodało tę blokadę, gdy po raz pierwszy zaczęto dyskutować o trenowaniu AI. W naszym badaniu 1000 najpopularniejszych domen spośród 518 witryn z robots.txt 114 wymieniało Google-Extended, a 94 (18,1%) blokowało dla niego stronę główną. Zdecyduj, czy to nadal odpowiada Twoim zamiarom, skoro obejmuje to także grounding.
Czy firewall może blokować Google, przepuszczając przeglądarki?
Tak. Jeśli ochrona przed botami lub limit żądań odpowiada crawlerom Google kodem 403, 429 albo stroną weryfikacji, Google nie może przeskanować strony, a z czasem może ona wypaść z wyszukiwarki, a razem z nią z groundingu Gemini. Najlepszym testem jest tu Sprawdzanie adresu URL, bo Google pobiera stronę z własnych adresów; test curl z Twojego komputera pokazuje tylko, jak Twoje reguły traktują user agenta.
Aby bezpiecznie dopuścić Google, weryfikuj odwiedzającego zamiast ufać nazwie. Google opisuje wyszukiwanie reverse DNS, a po nim forward DNS, i publikuje zakresy IP swoich popularnych crawlerów w common-crawlers.json:
# Reverse lookup: the name must end in googlebot.com, google.com or googleusercontent.com
host 66.249.66.1
# Forward lookup: must return the original address
host crawl-66-249-66-1.googlebot.com Zastąp przykładowy adres adresem z logów. Jeśli oba wyszukiwania się nie zgadzają, żądanie tylko podaje się za Google.
Jak sprawdzić, czy Gemini używa lub cytuje moją stronę?
Zadaj Gemini pytania, które zadają Twoi klienci, bez podawania nazwy swojej witryny, i otwórz źródła. Centrum pomocy Google podaje, że przycisk Źródła pojawia się na dole odpowiedzi lub w tekście i otwiera panel powiązanych linków, wśród których mogą być publiczne strony internetowe. Jeśli nie ma przycisku Źródła, Gemini nie podał linków do tej odpowiedzi, a Google zaznacza, że nie wszystkie odpowiedzi je zawierają. Zapisuj, które domeny się pojawiają, i powtarzaj te same pytania przez kilka tygodni.
Deweloperzy mogą przeprowadzić ten sam test przez Gemini API z Grounding with Google Search. Google podaje, że łączy to model z treściami z sieci w czasie rzeczywistym, a odpowiedzi z groundingiem zawierają cytowania z adresem URL i tytułem każdego źródła, więc możesz sprawdzić, czy pojawia się Twoja domena. Odpowiedzi przez API mogą różnić się od tego, co pokazuje aplikacja Gemini.
Niektóre pobrania związane z Gemini docierają jednak do Twojego serwera. Google wymienia fetchery uruchamiane przez użytkowników, takie jak Google-GeminiNotebook, który pobiera adresy URL dodane przez użytkowników jako źródła do projektu Gemini Notebook, oraz Google-Agent, używany przez agentów działających na infrastrukturze Google na prośbę użytkownika. Google podaje, że te fetchery zazwyczaj ignorują robots.txt, bo o pobranie poprosił użytkownik. Ich wizyty pokazują, że ludzie otwierają Twoje strony przez te produkty; nie są ścieżką groundingu opisaną wyżej.
Czy AI Overviews, AI Mode i reguły fragmentów wpływają na Gemini?
AI Overviews i AI Mode to funkcje wyszukiwarki Google z własnymi ustawieniami. Google wymienia nosnippet, data-nosnippet, max-snippet i noindex jako sposoby ograniczenia tego, co jest pokazywane z Twoich stron. Dokumentacja tagu meta robots podaje, że nosnippet zapobiega też użyciu treści jako bezpośredniego wejścia dla AI Overviews i AI Mode, a max-snippet ogranicza, ile może zostać użyte. Search Console ma też ustawienie dla całej witryny Search generative AI, które może wykluczyć witrynę z AI Overviews, AI Mode i funkcji generatywnej AI w Discover.
Żadna z tych stron nie wspomina o aplikacji Gemini. Nie zakładaj, że reguła fragmentów lub ustawienie w Search Console zmienia grounding Gemini ani że Google-Extended zmienia AI Overviews. Wyjątkiem jest noindex: zgodnie z definicją groundingu Google strona spoza indeksu wyszukiwarki nie może być do niego użyta. Aby znaleźć zapomniane reguły fragmentów, sprawdź HTML i nagłówki:
# Robots meta tags and data-nosnippet attributes in the HTML
curl -s https://example.com/page | grep -i -o -E '<meta[^>]*name="(robots|googlebot)"[^>]*>|data-nosnippet'
# The same rules sent as an HTTP header
curl -s -I https://example.com/page | grep -i "^x-robots-tag" Jak sprawdza to AISeeWhy
Darmowe sprawdzenie AISeeWhy pobiera Twoją stronę jako Googlebot i inne crawlery AI i wyszukiwarek obok prawdziwej przeglądarki, stosuje do każdego z nich Twój robots.txt, łącznie z tokenem Google-Extended, rozpoznaje strony weryfikacji i pokazuje, ile tekstu dociera bez JavaScriptu. Sprawdzenie Widoczność w AI, dostępne w okresie próbnym i w płatnych planach, zadaje Twoje pytania przez Gemini API z groundingiem w wyszukiwarce Google, używając Twojego własnego klucza, i pokazuje, czy Twoja marka lub domena jest wspomniana albo cytowana. Nie odpytuje AI Overviews ani AI Mode.
Następne kroki
- Tester i walidator robots.txt dla crawlerów AI
- Sprawdzanie IP crawlerów AI
- Zobacz przykład pełnego raportu
- Monitoring crawlerów AI
- Plany i ceny
Crawlery w tym artykule
Najczęstsze pytania
Czy mogę za darmo sprawdzić, czy Gemini widzi moją stronę?
Tak. Search Console, wyszukiwanie site:, Twój robots.txt i pytanie w Gemini nic nie kosztują. Darmowe sprawdzenie AISeeWhy testuje Googlebot, regułę Google-Extended i 14 innych crawlerów dla jednej strony dziennie.
Czy Gemini ma własnego crawlera?
Nie do groundingu. Google podaje, że Google-Extended nie ma ciągu user agenta, a przeszukiwanie wykonują istniejące crawlery Google. Osobne fetchery uruchamiane przez użytkowników, takie jak Google-GeminiNotebook i Google-Agent, odwiedzają strony na prośbę użytkownika, a według Google zazwyczaj ignorują robots.txt.
Czy po zablokowaniu Google-Extended Gemini może nadal wspominać moją markę?
Google podaje, że nie użyje wtedy Twoich treści do groundingu w aplikacjach Gemini. Ta reguła dotyczy Twoich własnych stron. Google nic nie mówi o treściach na innych witrynach, które piszą o Tobie, więc Gemini może nadal wymienić Twoją markę na podstawie tych źródeł.
Po jakim czasie zmiana w robots.txt dociera do Gemini?
Google nie podaje czasu dla Gemini. Jego dokumentacja robots.txt mówi, że Google zazwyczaj przechowuje plik w pamięci podręcznej do 24 godzin, więc odczekaj co najmniej dzień przed ponownym testem, a dłużej w przypadku stron, które Google rzadko ponownie skanuje.
Czy AI Overviews i Gemini korzystają z tych samych źródeł?
Google nie opisuje, jak te dwie rzeczy się do siebie mają. Obie korzystają z indeksu Google, ale mają różne ustawienia: reguły fragmentów i ustawienie w Search Console dla AI Overviews i AI Mode oraz Google-Extended dla groundingu Gemini. Sprawdzaj je osobno.
Jak śledzić odpowiedzi Gemini w czasie?
Prowadź stałą listę pytań klientów, zadawaj je Gemini według harmonogramu i zapisuj, które domeny pojawiają się w źródłach. Sprawdzenie Widoczność w AI od AISeeWhy co tydzień zadaje Twoje pytania przez Gemini API z groundingiem w wyszukiwarce Google i pokazuje wzmianki obok maksymalnie czterech konkurentów. Wyniki z API mogą różnić się od aplikacji Gemini.
Źródła
- Google: Google's common crawlers (Googlebot, Google-Extended)
- Google: User-triggered fetchers
- Google: Verifying Google crawlers and fetchers
- Google: How Google interprets the robots.txt specification
- Google Search Console Help: URL Inspection tool
- Gemini Apps Help: Gemini Apps Privacy Hub
- Gemini Apps Help: View related sources from Gemini Apps
- Google AI Studio: Grounding with Google Search
- Google Search Central: AI features and your website
- Google Search Central: Robots meta tag, data-nosnippet and X-Robots-Tag
- Google Search Console Help: Search generative AI control
- AISeeWhy: Raport o dostępie crawlerów AI, 2026-11