منافسي يظهر في ChatGPT وPerplexity وأنا لا. كيف أعرف السبب؟
اتبع ترتيباً: تأكد أولاً من أن زواحف البحث لدى المساعدات تستطيع الوصول إلى صفحاتك وقراءتها، ثم قارن صفحتك بالصفحة التي تستشهد بها للمنافس. تحقق مما إذا كانت تلك الصفحة تجيب عن السؤال مباشرة وفي أولها، وتذكر الأسعار والميزات والمواقع بنص عادي، وتتفق مع طريقة وصف المواقع الأخرى للنشاط التجاري، وتدعمها مراجعات وقوائم تستشهد بها المساعدات. لا ينشر أي مساعد طريقة ترتيبه، فهذا تشخيص بالاستبعاد لا معادلة.
تسأل ChatGPT أو Perplexity عن أفضل خيار في فئتك، فيُذكر منافس مع رابط، ولا يُذكر اسمك على الإطلاق. من المغري أن تخمّن السبب. والأفضل أن تستبعد الأسباب واحداً تلو الآخر، بدءاً بما هو قاطع وسهل الإثبات، مثل زاحف محظور، ثم الانتقال إلى ما يتعلق بالمحتوى والسمعة. وفي أثناء ذلك تكون صفحة المنافس المُستشهد بها أفضل دليل لديك على ما وجده المساعد مفيداً.
في هذه الصفحة
- لماذا لا يجد ChatGPT موقعي؟
- هل في موقعك صفحة تجيب عن هذا السؤال بالضبط؟
- هل أسعارك وميزاتك ومواقعك مذكورة بنص عادي؟
- هل تصف المواقع الأخرى نشاطك بالطريقة التي تصفه بها؟
- ما الصفحات الخارجية التي تستشهد بها المساعدات، وهل أنت موجود فيها؟
- هل معلوماتك حديثة ومؤرخة بوضوح؟
- كيف أقارن صفحتي بصفحة المنافس المُستشهد بها، وما الذي يخرج عن سيطرتي؟
لماذا لا يجد ChatGPT موقعي؟
افحص الوصول أولاً، لأن أي جهد في المحتوى لا ينفع إذا رُدّ الزاحف. يسمّي كل مساعد الزاحف الذي يبني نتائج بحثه: OAI-SearchBot لـ ChatGPT، وPerplexityBot لـ Perplexity، وClaude-SearchBot لـ Claude. تقول OpenAI إن المواقع التي تمنع OAI-SearchBot لن تظهر في إجابات بحث ChatGPT، وإن كان يمكن أن تظهر كروابط تنقّل. وتقول Anthropic إن تعطيل Claude-SearchBot قد يقلّل ظهورك في نتائج بحث المستخدمين.
هذا الحظر شائع. ففي دراستنا لأشهر 1,000 نطاق، من بين 518 نطاقاً قدّمت ملف robots.txt، منع 58 منها OAI-SearchBot، ومنع 67 Claude-SearchBot، ومنع 86 PerplexityBot. نظرة سريعة على ملفك:
curl -s https://example.com/robots.txt | grep -i -A4 -E "user-agent: (oai-searchbot|perplexitybot|claude-searchbot|\*)" ثم افحص البوابتين الأخريين. قد يردّ جدار حماية أو شبكة CDN على الزواحف بالرمز 403 أو بصفحة تحدٍّ بينما تحصل المتصفحات على الصفحة الحقيقية؛ وتطلب OpenAI من أصحاب المواقع التأكد من أن الاستضافة أو شبكة CDN تسمح بالزيارات من عناوين IP المنشورة لزاحف البحث لديها، وتنبّه Perplexity إلى أن المواقع التي يحميها جدار حماية لتطبيقات الويب قد تحتاج إلى السماح لزواحفها صراحةً. كما أن النص الذي لا يظهر إلا بعد تشغيل JavaScript قد لا يصل إلى الزاحف أبداً. تشرح أدلتنا عن robots.txt لزواحف الذكاء الاصطناعي وعن الحظر في جدار الحماية وعن محتوى JavaScript كل إصلاح بالتفصيل. أما في Google AI Overviews وAI Mode فالشرط التقني الوحيد لدى Google أن تكون الصفحة مفهرسة ومؤهلة للعرض مع مقتطف.
هل في موقعك صفحة تجيب عن هذا السؤال بالضبط؟
بعد التأكد من الوصول، افتح صفحة المنافس المُستشهد بها وانظر ما هي. كثيراً ما تكون صفحة مبنية حول السؤال نفسه: مقارنة، أو دليل «أفضل الأدوات لـ»، أو صفحة أسعار، أو صفحة لحالة استخدام محددة. إن لم يكن في موقعك سوى صفحة رئيسية وقائمة ميزات، فقد لا تكون لديك صفحة تطابق السؤال أصلاً.
وهذا مهم لأن المساعدات لا تبحث بكلمات المستخدم نفسها. تقول OpenAI إن ChatGPT يعيد عادةً صياغة السؤال في استعلام بحث موجّه واحد أو أكثر، وتقول Google إن AI Mode يُجري عدة عمليات بحث مترابطة في موضوعات فرعية. والصفحة التي يطابق عنوانها وفقرتها الأولى أحد تلك الاستعلامات الأضيق أوفر حظاً في أن تُعثر عليها من صفحة عامة تمرّ على الموضوع عرضاً.
ضع الإجابة في البداية. اذكر في الفقرة الأولى لمن المنتج وماذا يفعل وكم يكلّف، بجمل تبقى مفهومة حين تُقتبس وحدها. ومن نصائح Google نفسها لميزات الذكاء الاصطناعي التأكد من أن المحتوى المهم متاح في صورة نصية.
هل أسعارك وميزاتك ومواقعك مذكورة بنص عادي؟
الحقائق الموجودة فقط في صور أو ملفات PDF أو أداة تهيئة أو خلف عبارة «تواصل مع المبيعات» يصعب على أي نظام اقتباسها. قارن عدد الحقائق الملموسة التي تذكرها صفحة المنافس: الخطط والأسعار، والدول المدعومة، والتكاملات، وساعات العمل، ومناطق التوصيل. إذا كانت صفحته تقول «من $29 شهرياً، الشحن إلى الاتحاد الأوروبي والمملكة المتحدة» وصفحتك تقول «أسعار مرنة»، فلدى المساعد ما يستشهد به في جانب واحد فقط.
OpenAI محددة بشأن إجابات المنتجات. فهي تقول إن ChatGPT عند اختيار المنتجات يأخذ في الحسبان البيانات الوصفية المنظمة من مزوّدين مباشرين وخارجيين، مثل السعر ووصف المنتج، ومحتوى آخر من جهات خارجية، وإنه يرتّب التجار وفق عوامل مثل التوفر والسعر والجودة وكون التاجر هو المصنّع أو البائع الرئيسي. وتطلب Google تحديث معلومات Merchant Center والملف التجاري، والتأكد من أن البيانات المنظمة تطابق النص المرئي في الصفحة.
هل تصف المواقع الأخرى نشاطك بالطريقة التي تصفه بها؟
تجمع المساعدات بين ما تقوله عن نفسك وما يقوله الآخرون عنك. إذا اختلف اسم نشاطك وفئته ووصفه بين موقعك والأدلة ومتاجر التطبيقات والحسابات الاجتماعية، صار ربطها بكيان واحد أصعب. استخدم اسماً واحداً ووصفاً قصيراً واحداً في كل مكان تتحكم فيه.
أضف إلى صفحتك الرئيسية أو صفحة «من نحن» بيانات منظمة من نوع Organization. تعرّف Google الخاصية sameAs بأنها عنوان URL لصفحة في موقع آخر فيها معلومات إضافية عن مؤسستك، مثل حساب اجتماعي أو صفحة مراجعات، وتقول إن بعض الخصائص تُستخدم لتمييز مؤسستك عن غيرها ممن يحملون أسماء مشابهة.
<script type="application/ld+json">
{
"@context": "https://schema.org",
"@type": "Organization",
"name": "Example",
"url": "https://example.com/",
"logo": "https://example.com/logo.png",
"description": "Online booking software for small salons.",
"sameAs": [
"https://www.linkedin.com/company/example",
"https://github.com/example"
]
}
</script> ما الصفحات الخارجية التي تستشهد بها المساعدات، وهل أنت موجود فيها؟
انظر إلى كل مصدر مُستشهد به في الإجابات التي يظهر فيها المنافس. في الغالب لا يكون معظمها موقع المنافس نفسه، بل مواقع مراجعات وقوائم «الأفضل» ومقالات مقارنة ونقاشات في المنتديات. إن كنت غائباً عنها جميعاً، فليس لدى المساعد إلا القليل من الأدلة الخارجية عنك.
لا تقول المساعدات إلا القليل عن هذا. تقول OpenAI إن إجابات المنتجات قد تأخذ المراجعات في الحسبان، وإن ملخصات المراجعات لديها مبنية على مراجعات من مواقع عامة. وتقول Perplexity إنها تبحث في مصادر موثوقة مثل المقالات والمواقع والمجلات، وإنها تمنح بعض المواقع كاملةً تسمية Government أو Academic أو Trusted بعد مراجعة تسأل مثلاً هل يصحّح الموقع أخطاءه وهل يذكر كاتب كل مادة. ولا تقول Perplexity إن هذه التسميات تحدد المصادر المُستشهد بها، وتقول إن المدفوعات والشراكات لا تؤثر فيها.
الخطوة العملية تسويق عادي: اطلب من عملاء حقيقيين كتابة مراجعات حيث يبحث مشتروك، وأدرج نشاطك في أدلة فئتك، وأجب عن الأسئلة في المجتمعات التي يمكنك أن تفيد فيها فعلاً. أما الموضع المدفوع داخل الإجابة نفسها فغير متاح: تقول OpenAI إن المعلنين لا يستطيعون توجيه ردود ChatGPT أو ترتيبها أو تعديلها.
هل معلوماتك حديثة ومؤرخة بوضوح؟
تنصح OpenAI مستخدمي ChatGPT بالتحقق من تاريخ نشر المصدر المُستشهد به أو تحديثه، فالتواريخ مهمة لمن يقرأ الإجابة. إذا كانت صفحة أسعارك ما زالت تعرض خطط العام الماضي، أو كانت صفحة المقارنة بلا تاريخ أصلاً، فقد تبدو صفحة منافس من الشهر الماضي أجدر بالثقة ببساطة.
توصي Google بتاريخ ظاهر في الصفحة وبقيم datePublished وdateModified مطابقة في البيانات المنظمة. وتعدّ تغيير تاريخ الصفحة لتبدو حديثة دون تغييرات جوهرية علامة تحذير. حدّث الحقائق أولاً، ثم التاريخ.
كيف أقارن صفحتي بصفحة المنافس المُستشهد بها، وما الذي يخرج عن سيطرتي؟
اطرح السؤال نفسه عدة مرات، ودوّن أي صفحة للمنافس يُستشهد بها أكثر، وضعها بجانب أقرب صفحة لديك:
- هل يطابق العنوان السؤال، وهل تجيب الفقرة الأولى عنه؟
- ما الحقائق التي تذكرها صفحته ولا تذكرها صفحتك؟
- هل نصّه موجود في HTML، وهل نصّك كذلك؟
- هل صفحته مؤرخة، ومنذ متى؟
- أي المواقع الخارجية تذكره، وهل يذكرك أي منها؟
أصلح الفجوة الأكبر أولاً، ثم أعد الفحص على مدى عدة أسابيع لا في اليوم التالي. بعض الأمور لا يمكنك تغييرها. تقول OpenAI إن ChatGPT يرتّب النتائج وفق عوامل متعددة وإن الظهور غير مضمون؛ ولا تنشر Perplexity ولا Anthropic ولا Google طريقة ترتيبها للمصادر. كما تتفاوت الإجابات بحسب ذاكرة المستخدم وسجله وموقعه.
يفحص AISeeWhy الجزء الأول نيابةً عنك: يجلب صفحتك بصفتها 16 زاحف ذكاء اصطناعي وبحث إلى جانب متصفح، ويطبّق robots.txt على كل زاحف، ويكتشف صفحات التحدي، ويعرض مقدار النص الذي يصل دون JavaScript. ثم تتتبع ميزة الظهور في الذكاء الاصطناعي عبر الزمن ما إذا كان ChatGPT وClaude وPerplexity وGemini يذكرونك إلى جانب ما يصل إلى أربعة منافسين.
إصلاحات لهذه المشكلة
- لا توجد إجابة قصيرة تحت H1
- علامتك التجارية غير مذكورة على Reddit ومواقع المراجعات
- الناشر غير محدد
- الناشر بلا روابط sameAs
الخطوات التالية
- أداة اختبار وفحص robots.txt لزواحف الذكاء الاصطناعي
- فاحص ومدقق llms.txt
- اطّلع على مثال لتقرير كامل
- مراقبة زواحف الذكاء الاصطناعي
- الخطط والأسعار
الزواحف في هذا المقال
الأسئلة الشائعة
لماذا لا يعرض ChatGPT موقعي؟
ابدأ بالوصول: تقول OpenAI إن المواقع التي تمنع OAI-SearchBot لا تظهر في إجابات بحث ChatGPT، وإن الاستضافة أو شبكة CDN يجب أن تسمح بعناوين IP المنشورة لزاحف البحث لديها. إن كان الوصول سليماً، فالسبب المعتاد أن صفحة أخرى تجيب عن السؤال بشكل أكثر مباشرة، بحقائق أوضح وإشارات خارجية أكثر. وتقول OpenAI إن الظهور غير مضمون.
هل يمكنني أن أدفع ليوصي بي ChatGPT بدلاً من منافسي؟
لا. تقول OpenAI إن الإعلانات لا تؤثر في إجابات ChatGPT، وإن المعلنين لا يستطيعون توجيه الردود أو ترتيبها أو تعديلها، وإن الإعلانات تُعرض منفصلة ومُعلَّمة. ونتائج المنتجات في إجابات التسوق ليست إعلانات كذلك.
كم من الوقت بعد الإصلاح يلاحظه ChatGPT أو Perplexity؟
تقول OpenAI إن تغييرات robots.txt قد تستغرق نحو 24 ساعة لتصل إلى أنظمة البحث لديها، وتقول Perplexity إنها تستغرق حتى 24 ساعة. هذا يعيد الوصول فقط. أما الاستشهاد بصفحتك بعد ذلك فيتوقف على مقارنتها بمصادر أخرى، وهي مقارنة غير منشورة، لذا احكم على تغييرات المحتوى على مدى أسابيع.
هل يجعل ملف llms.txt مساعدات الذكاء الاصطناعي توصي بي؟
تقول Google إنك لا تحتاج إلى ملفات نصية للذكاء الاصطناعي ولا إلى ترميز خاص للظهور في AI Overviews أو AI Mode. ولا تذكر OpenAI ولا Perplexity ولا Anthropic ملف llms.txt في صفحات المساعدة الخاصة بالزواحف والبحث التي راجعناها، لذا لا تعوّل عليه كعامل ترتيب.
هل تحدد تسمية Trusted في Perplexity المواقع التي يُستشهد بها؟
لا تقول Perplexity ذلك. فهي تصف تسميات Government وAcademic وTrusted بأنها نتيجة مراجعة لمواقع كاملة، وتقول إن غياب التسمية ليس حكماً سلبياً، وإن المدفوعات لا تؤثر في التسميات.
المصادر
- OpenAI: Overview of OpenAI crawlers
- OpenAI: Searching the web with ChatGPT
- OpenAI: Shopping with ChatGPT Search
- OpenAI: Ads in ChatGPT
- Perplexity: Perplexity crawlers
- Perplexity: How does Perplexity work?
- Perplexity: Understanding source labels
- Anthropic: Does Anthropic crawl data from the web, and how can site owners block the crawler?
- Google Search Central: AI features and your website
- Google Search Central: Organization structured data
- Google Search Central: Influence your byline dates
- Google Search Central: Creating helpful, reliable, people-first content
- AISeeWhy: تقرير وصول زواحف الذكاء الاصطناعي، 2026-11