GPTBot
GPTBot هو زاحف OpenAI للمحتوى الذي قد يُستخدم في تدريب نماذجها التأسيسية للذكاء الاصطناعي التوليدي. منعه في robots.txt يُعلم OpenAI بألا تستخدم محتواك في التدريب. لكن حجبه لا يزيل موقعك من إجابات البحث في ChatGPT، فهي تعتمد على OAI-SearchBot.
ما الذي يفعله
تقول OpenAI إن GPTBot يُستخدم لجعل نماذجها التأسيسية للذكاء الاصطناعي التوليدي أكثر فائدة وأمانًا. يزحف إلى محتوى قد يُستخدم في تدريب تلك النماذج، ومنع GPTBot يدل على أن محتوى الموقع يجب ألا يُستخدم في التدريب.
السماح به قرار يتعلق بالسياسة وليس بالظهور. يستخدم البحث في ChatGPT زاحفًا منفصلًا هو OAI-SearchBot، وتوثّق OpenAI الإعدادين بوصفهما مستقلين. وعند السماح بالاثنين معًا، تقول OpenAI إنها قد تستخدم نتائج زحف واحد للغرضين لتفادي الزحف مرتين.
في دراستنا لشهر 2026-11، حجبه 21.4% من المواقع الشائعة التي لديها ملف robots.txt. →
رمز robots.txt
GPTBot
سلسلة وكيل المستخدم
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbotكيف تسمح به
User-agent: GPTBot
Allow: /كيف تحجبه
User-agent: GPTBot
Disallow: /كيف تتحقق من الزيارات الحقيقية
تنشر OpenAI نطاقات IP التي يستخدمها هذا الوكيل في ملف JSON. طابق عنوان IP المصدر للطلب مع هذه النطاقات؛ فالطلب الذي يذكر GPTBot لكنه يأتي من عنوان آخر لا يأتي من OpenAI. وتشير OpenAI إلى أن رقم الإصدار في وكيل المستخدم قد يتغير، لذا طابق الرمز GPTBot لا السلسلة الكاملة.