Googlebot

Google · የፍለጋ ሞተር

Googlebot የፍለጋ indexesቹን ለመገንባት የGoogle ዋና ክሮውለር ነው። Google ለGooglebot የrobots.txt ደንቦች ድረ-ገጽ ለSearch፣ እንደ AI Overviews እና AI Mode ያሉ የAI ባህሪያትን ጨምሮ፣ እንዴት crawl እንደሚደረግ የሚቆጣጠሩ እንደሆኑ ይናገራል። እሱን ማገድ ገጾችዎን ከGoogle Search እና ከእነዚያ የAI መልሶች ያስወጣል።

እንዴት እንደሚፈቀድ

User-agent: Googlebot
Allow: /

እንዴት እንደሚታገድ

User-agent: Googlebot
Disallow: /

ምን ያደርጋል

Googlebot የGoogle የፍለጋ indexesን ለመገንባት መረጃ ለማግኘት ያገለግላል። ለGooglebot token የሚቀርቡ የcrawl ምርጫዎች Google Searchን እና እንደ Google Images፣ Video፣ Google News እና Discover ያሉ ምርቶችን ይነካሉ። እንደ ስማርትፎን እና እንደ ዴስክቶፕ ክሮውለር ይሠራል፤ ሁለቱም ተመሳሳዩን የGooglebot ደንቦች ያከብራሉ፣ Google ደግሞ የተለመዱ ክሮውለሮቹ በራስ-ሰር crawl ሲያደርጉ ሁልጊዜ robots.txtን እንደሚያከብሩ ይናገራል።

የGoogle የAI ባህሪያት ሰነድ የGooglebot ደንቦችን AI Overviews እና AI Modeን ጨምሮ ለSearch መቆጣጠሪያ አድርጎ ይገልጻል፣ የሚታየውን ለመገደብ ደግሞ ወደ nosnippet፣ data-nosnippet፣ max-snippet እና noindex ይጠቁማል። ለGemini ስልጠና መጠቀም በGoogle-Extended ለብቻው ይቆጣጠራል።

በ2026-11 ባደረግነው ጥናት robots.txt ካላቸው ታዋቂ ድረ-ገጾች 2.7% አግደውታል። →

የrobots.txt token

Googlebot

የUser-agent string

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Googlebot/2.1; +http://www.google.com/bot.html) Chrome/W.X.Y.Z Safari/537.36

እውነተኛ ጉብኝቶችን እንዴት ማረጋገጥ እንደሚቻል

Google የuser agent strings ሊጭበረበሩ እንደሚችሉ ይናገራል እና ባለሁለት እርምጃ የDNS ፍተሻን ይመክራል። በጠያቂው IP ላይ reverse DNS lookup ያካሂዱ፦ የhost ስሙ በgooglebot.com፣ google.com ወይም googleusercontent.com ማለቅ አለበት። ከዚያ በዚያ የhost ስም ላይ forward lookup ያካሂዱ እና ተመሳሳዩን IP እንደሚመልስ ያረጋግጡ። Google የተለመዱ ክሮውለሮቹን የIP ክልሎች እንደ JSON ያትማል፣ ስለዚህ አድራሻዎችን በራስ-ሰር ማዛመድ ይችላሉ።

ድረ-ገጽዎ እንደሚያስገባው ይፈትሹ →

AEO እና SEO፦ ምን ተመሳሳይ ነው፣ ለAI መልሶችስ ምን ይለወጣል →