Googlebot

Google · محرك بحث

Googlebot هو زاحف Google الرئيسي لبناء فهارس البحث. تقول Google إن قواعد robots.txt الخاصة بـ Googlebot هي وسيلة التحكم في كيفية الزحف إلى الموقع لأغراض البحث، بما في ذلك ميزات الذكاء الاصطناعي مثل AI Overviews وAI Mode. وحجبه يزيل صفحاتك من بحث Google ومن إجابات الذكاء الاصطناعي هذه.

ما الذي يفعله

يُستخدم Googlebot للعثور على المعلومات لبناء فهارس بحث Google. وتؤثر تفضيلات الزحف الموجّهة إلى الرمز Googlebot في بحث Google ومنتجات مثل صور Google والفيديو وGoogle News وDiscover. ويعمل كزاحف للهواتف الذكية وكزاحف لسطح المكتب؛ وكلاهما يتبع قواعد Googlebot نفسها، وتقول Google إن زواحفها الشائعة تلتزم دائمًا بملف robots.txt عند الزحف التلقائي.

تصف وثائق Google عن ميزات الذكاء الاصطناعي قواعد Googlebot بأنها وسيلة التحكم في البحث، بما في ذلك AI Overviews وAI Mode، وتشير إلى nosnippet وdata-nosnippet وmax-snippet وnoindex للحد مما يُعرض. أما الاستخدام في تدريب Gemini فيتحكم فيه Google-Extended بشكل منفصل.

في دراستنا لشهر 2026-11، حجبه 2.7% من المواقع الشائعة التي لديها ملف robots.txt. →

رمز robots.txt

Googlebot

سلسلة وكيل المستخدم

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Googlebot/2.1; +http://www.google.com/bot.html) Chrome/W.X.Y.Z Safari/537.36

كيف تسمح به

User-agent: Googlebot
Allow: /

كيف تحجبه

User-agent: Googlebot
Disallow: /

كيف تتحقق من الزيارات الحقيقية

تقول Google إن سلاسل وكيل المستخدم يمكن انتحالها، وتوصي بفحص DNS على خطوتين. أجرِ بحث DNS عكسيًا على عنوان IP الطالب: يجب أن ينتهي اسم المضيف بـ googlebot.com أو google.com أو googleusercontent.com. ثم أجرِ بحثًا أماميًا على اسم المضيف هذا وتأكد من أنه يعيد عنوان IP نفسه. وتنشر Google أيضًا نطاقات IP لزواحفها الشائعة بصيغة JSON، فيمكنك مطابقة العناوين تلقائيًا.

افحص هل يسمح موقعك بدخوله →

AEO مقابل SEO: ما الذي يتشابه وما الذي يتغير في إجابات الذكاء الاصطناعي →