رقیب من در ChatGPT و Perplexity دیده میشود و من نه. چطور بفهمم چرا؟
به ترتیب پیش بروید: اول مطمئن شوید خزندههای جستجوی دستیارها میتوانند به صفحههای شما برسند و آنها را بخوانند، سپس صفحه خود را با صفحهای که برای رقیب ذکر میکنند مقایسه کنید. بررسی کنید آیا آن صفحه مستقیم و زود به پرسش پاسخ میدهد، قیمتها، ویژگیها و موقعیتها را بهصورت متن ساده بیان میکند، با توصیف سایتهای دیگر از کسبوکار همخوان است و نقدها و فهرستهایی که دستیارها به آنها استناد میکنند پشتیبانش هستند. هیچ دستیاری روش رتبهبندی خود را منتشر نمیکند، پس این عیبیابی با حذف گزینههاست، نه یک فرمول.
از ChatGPT یا Perplexity بهترین گزینه در دسته کاریتان را میپرسید و نام یک رقیب همراه با لینک میآید، در حالی که اصلاً از شما نامی برده نمیشود. وسوسهانگیز است که دلیلش را حدس بزنید. راه بهتر این است که دلیلها را یکییکی کنار بگذارید، از آنهایی شروع کنید که دوحالته و اثباتشان آسان است، مثل خزنده مسدودشده، و بعد به سراغ آنهایی بروید که به محتوا و اعتبار مربوطاند. در این مسیر، صفحه ذکرشده رقیب بهترین مدرک شما از چیزی است که دستیار مفید دانسته است.
در این صفحه
- چرا ChatGPT سایت من را پیدا نمیکند؟
- آیا صفحهای در سایت شما به همان پرسش دقیق پاسخ میدهد؟
- آیا قیمتها، ویژگیها و موقعیتهای شما بهصورت متن ساده آمدهاند؟
- آیا سایتهای دیگر کسبوکار شما را همانطور توصیف میکنند که خودتان؟
- دستیارها به کدام صفحههای شخص ثالث استناد میکنند و آیا شما در آنها هستید؟
- آیا اطلاعات شما تازه و با تاریخ مشخص است؟
- صفحهام را چطور با صفحه ذکرشده رقیب مقایسه کنم و چه چیزی در اختیار من نیست؟
چرا ChatGPT سایت من را پیدا نمیکند؟
اول دسترسی را بررسی کنید، چون اگر خزنده برگردانده شود هیچ کار محتوایی کمکی نمیکند. هر دستیار خزندهای را که نتایج جستجویش را میسازد نام میبرد: OAI-SearchBot برای ChatGPT، PerplexityBot برای Perplexity و Claude-SearchBot برای Claude. OpenAI میگوید سایتهایی که OAI-SearchBot را رد کردهاند در پاسخهای جستجوی ChatGPT نشان داده نمیشوند، هرچند ممکن است همچنان بهصورت لینکهای ناوبری ظاهر شوند. Anthropic میگوید غیرفعال کردن Claude-SearchBot ممکن است دیدهشدن شما در نتایج جستجوی کاربران را کم کند.
این مسدودسازی رایج است. در مطالعه ما روی 1,000 دامنه پربازدید، از 518 دامنهای که robots.txt داشتند، 58 دامنه OAI-SearchBot را ممنوع کرده بودند، 67 دامنه Claude-SearchBot را و 86 دامنه PerplexityBot را. یک نگاه سریع به فایل خودتان:
curl -s https://example.com/robots.txt | grep -i -A4 -E "user-agent: (oai-searchbot|perplexitybot|claude-searchbot|\*)" سپس دو دروازه دیگر را بررسی کنید. فایروال یا CDN ممکن است به خزندهها خطای 403 یا صفحه چالش بدهد در حالی که مرورگرها صفحه واقعی را میگیرند؛ OpenAI از صاحبان سایت میخواهد مطمئن شوند هاست یا CDN آنها ترافیک نشانیهای IP منتشرشده searchbot را میپذیرد، و Perplexity یادآوری میکند که سایتهای پشت فایروال برنامه وب ممکن است لازم باشد رباتهایش را صریحاً مجاز کنند. و متنی که فقط پس از اجرای JavaScript ظاهر میشود ممکن است هرگز به خزنده نرسد. راهنماهای ما درباره robots.txt برای خزندههای هوش مصنوعی، مسدودسازی فایروال و محتوای JavaScript هر راهحل را با جزئیات توضیح میدهند. برای AI Overviews و AI Mode گوگل، تنها الزام فنی Google این است که صفحه ایندکس شده باشد و بتواند با اسنیپت نمایش داده شود.
آیا صفحهای در سایت شما به همان پرسش دقیق پاسخ میدهد؟
وقتی دسترسی روشن شد، صفحه ذکرشده رقیب را باز کنید و ببینید چیست. خیلی وقتها صفحهای است که حول خود پرسش ساخته شده: یک مقایسه، یک راهنمای «بهترین ابزارها برای»، یک صفحه قیمت یا صفحهای برای یک کاربرد مشخص. اگر سایت شما فقط صفحه اصلی و فهرست ویژگیها دارد، شاید اصلاً صفحهای از شما با آن پرسش جور نباشد.
این مهم است چون دستیارها با کلمات دقیق کاربر جستجو نمیکنند. OpenAI میگوید ChatGPT معمولاً پرسش را به یک یا چند پرسوجوی هدفمند بازنویسی میکند، و Google میگوید AI Mode چند جستجوی مرتبط در زیرموضوعها انجام میدهد. صفحهای که تیتر و پاراگراف اولش با یکی از آن پرسوجوهای محدودتر جور است، شانس بیشتری برای پیدا شدن دارد تا صفحهای کلی که فقط گذرا به موضوع میپردازد.
پاسخ را زود بیاورید. در پاراگراف اول بگویید محصول برای چه کسی است، چه میکند و چقدر هزینه دارد، با جملههایی که اگر جداگانه نقل شوند هم معنا داشته باشند. توصیه خود Google برای قابلیتهای هوش مصنوعی شامل این است که محتوای مهم بهصورت متنی در دسترس باشد.
آیا قیمتها، ویژگیها و موقعیتهای شما بهصورت متن ساده آمدهاند؟
واقعیتهایی که فقط در تصویرها، فایلهای PDF، یک پیکربندیکننده یا پشت «با فروش تماس بگیرید» هستند، برای هر سیستمی سخت نقل میشوند. مقایسه کنید صفحه رقیب چند واقعیت مشخص بیان میکند: پلنها و قیمتها، کشورهای پشتیبانیشده، یکپارچهسازیها، ساعت کاری، مناطق ارسال. اگر صفحه آنها میگوید «از ماهی 29 دلار، ارسال به اتحادیه اروپا و بریتانیا» و صفحه شما میگوید «قیمتگذاری انعطافپذیر»، دستیار فقط در یک طرف چیزی برای نقل کردن دارد.
OpenAI درباره پاسخهای محصول صریح است. میگوید ChatGPT هنگام انتخاب محصولات فراداده ساختاریافته از ارائهدهندگان اولشخص و سومشخص، مثل قیمت و توضیح محصول، و محتوای دیگر شخص ثالث را در نظر میگیرد، و فروشندگان را بر اساس عواملی مثل موجودی، قیمت، کیفیت و اینکه سازنده یا فروشنده اصلی هستند یا نه رتبهبندی میکند. Google از شما میخواهد اطلاعات Merchant Center و Business Profile را بهروز نگه دارید و مطمئن شوید داده ساختاریافته با متن قابل مشاهده صفحه همخوان است.
آیا سایتهای دیگر کسبوکار شما را همانطور توصیف میکنند که خودتان؟
دستیارها آنچه را شما درباره خودتان میگویید با آنچه دیگران درباره شما میگویند ترکیب میکنند. اگر نام کسبوکار، دسته و توضیح شما بین سایت، فهرستهای کسبوکار، فروشگاههای اپ و پروفایلهای اجتماعی فرق کند، وصل کردن آنها به یک موجودیت واحد سختتر است. در همه جاهایی که در اختیار شماست از یک نام و یک توضیح کوتاه استفاده کنید.
در صفحه اصلی یا صفحه درباره ما، داده ساختاریافته Organization اضافه کنید. Google sameAs را نشانی صفحهای در وبسایتی دیگر با اطلاعات بیشتر درباره سازمان شما تعریف میکند، مثل یک پروفایل اجتماعی یا پروفایل نقد، و میگوید برخی ویژگیها برای تشخیص سازمان شما از سازمانهای دیگر با نام مشابه استفاده میشوند.
<script type="application/ld+json">
{
"@context": "https://schema.org",
"@type": "Organization",
"name": "Example",
"url": "https://example.com/",
"logo": "https://example.com/logo.png",
"description": "Online booking software for small salons.",
"sameAs": [
"https://www.linkedin.com/company/example",
"https://github.com/example"
]
}
</script> دستیارها به کدام صفحههای شخص ثالث استناد میکنند و آیا شما در آنها هستید؟
به همه منابعی که در پاسخهای حاوی نام رقیب ذکر شدهاند نگاه کنید. اغلب بیشترشان سایت خود رقیب نیستند، بلکه سایتهای نقد، فهرستهای «بهترینها»، مقالههای مقایسهای و رشتههای انجمناند. اگر در هیچکدام نباشید، دستیار شواهد بیرونی کمی درباره شما دارد.
دستیارها درباره این موضوع فقط کمی میگویند. OpenAI میگوید پاسخهای محصول ممکن است نقدها را در نظر بگیرند و خلاصه نقدهایش بر اساس نقدهای وبسایتهای عمومی است. Perplexity میگوید در منابع معتبری مثل مقالهها، وبسایتها و نشریهها جستجو میکند و برخی سایتها را بهطور کامل پس از بازبینی با برچسب Government، Academic یا Trusted مشخص میکند؛ بازبینیای که مثلاً میپرسد آیا سایت اشتباهاتش را اصلاح میکند و میگوید هر نوشته را چه کسی نوشته است. Perplexity نمیگوید این برچسبها تعیین میکنند به کدام منابع استناد شود، و میگوید پرداختها و همکاریها روی آنها اثری ندارند.
گام عملی همان بازاریابی معمول است: از مشتریان واقعی بخواهید در جایی که خریداران شما جستجو میکنند نقد بنویسند، در فهرستهای دسته کاری خود ثبت شوید و در انجمنهایی که واقعاً میتوانید کمک کنید به پرسشها پاسخ دهید. جایگاه پولی در خود پاسخ ارائه نمیشود: OpenAI میگوید تبلیغکنندگان نمیتوانند پاسخهای ChatGPT را شکل دهند، رتبهبندی کنند یا تغییر دهند.
آیا اطلاعات شما تازه و با تاریخ مشخص است؟
OpenAI به کاربران ChatGPT میگوید بررسی کنند منبع ذکرشده کی منتشر یا بهروز شده است، پس تاریخها برای خوانندگان پاسخ مهماند. اگر صفحه قیمت شما هنوز پلنهای سال گذشته را نشان میدهد، یا صفحه مقایسه شما اصلاً تاریخ ندارد، ممکن است صفحه ماه گذشته رقیب بهسادگی قابل اعتمادتر به نظر برسد.
Google یک تاریخ قابل مشاهده در صفحه و مقادیر همخوان datePublished و dateModified در داده ساختاریافته را توصیه میکند. همچنین تغییر تاریخ صفحه برای تازه نشان دادن آن، بدون تغییرات اساسی، را نشانه هشدار میداند. اول واقعیتها را بهروز کنید، بعد تاریخ را.
صفحهام را چطور با صفحه ذکرشده رقیب مقایسه کنم و چه چیزی در اختیار من نیست؟
یک پرسش را چند بار بپرسید، یادداشت کنید کدام صفحه رقیب بیشتر ذکر میشود و آن را کنار نزدیکترین صفحه خودتان بگذارید:
- آیا تیتر با پرسش جور است و پاراگراف اول به آن پاسخ میدهد؟
- صفحه آنها کدام واقعیتها را بیان میکند که صفحه شما نمیکند؟
- آیا متن آنها در HTML هست، و متن شما چطور؟
- آیا صفحه آنها تاریخ دارد و چقدر تازه است؟
- کدام سایتهای بیرونی از آنها نام میبرند و آیا هیچکدام از شما هم نام میبرد؟
اول بزرگترین شکاف را رفع کنید، سپس طی چند هفته دوباره بررسی کنید، نه فردای آن روز. بعضی چیزها را نمیتوانید تغییر دهید. OpenAI میگوید ChatGPT نتایج را با چند عامل رتبهبندی میکند و جایگاه تضمینشده نیست؛ Perplexity، Anthropic و Google هم نحوه رتبهبندی منابع را منتشر نمیکنند. پاسخها همچنین با حافظه، سابقه و موقعیت کاربر تغییر میکنند.
AISeeWhy بخش اول را برای شما بررسی میکند: صفحه شما را در نقش 16 خزنده هوش مصنوعی و جستجو در کنار یک مرورگر دریافت میکند، robots.txt را برای هر خزنده اعمال میکند، صفحههای چالش را تشخیص میدهد و نشان میدهد چه مقدار متن بدون JavaScript میرسد. سپس قابلیت دیدهشدن در هوش مصنوعی در طول زمان پیگیری میکند که آیا ChatGPT، Claude، Perplexity و Gemini در کنار حداکثر چهار رقیب از شما نام میبرند.
راهحلهای این مشکل
- زیر H1 پاسخ کوتاهی نیست
- برند شما در Reddit و سایتهای نظرسنجی مطرح نشده است
- ناشر مشخص نشده است
- ناشر لینک sameAs ندارد
قدمهای بعدی
- تست و بررسی robots.txt برای خزندههای هوش مصنوعی
- بررسیکننده و اعتبارسنج llms.txt
- نمونهای از گزارش کامل را ببینید
- پایش خزندههای هوش مصنوعی
- پلنها و قیمتها
خزندههای این مقاله
پرسشهای متداول
چرا ChatGPT سایت من را نشان نمیدهد؟
از دسترسی شروع کنید: OpenAI میگوید سایتهایی که OAI-SearchBot را رد کردهاند در پاسخهای جستجوی ChatGPT نشان داده نمیشوند و هاست یا CDN شما باید نشانیهای IP منتشرشده searchbot آن را بپذیرد. اگر دسترسی درست است، دلیل معمول این است که صفحه دیگری مستقیمتر، با واقعیتهای روشنتر و اشارههای بیرونی بیشتر به پرسش پاسخ میدهد. OpenAI میگوید جایگاه تضمینشده نیست.
آیا میتوانم پول بدهم تا ChatGPT بهجای رقیبم مرا پیشنهاد کند؟
نه. OpenAI میگوید تبلیغات روی پاسخهای ChatGPT اثری ندارند، تبلیغکنندگان نمیتوانند پاسخها را شکل دهند، رتبهبندی کنند یا تغییر دهند، و تبلیغات جداگانه و با برچسب نشان داده میشوند. نتایج محصول در پاسخهای خرید هم تبلیغ نیستند.
چقدر بعد از رفع مشکل، ChatGPT یا Perplexity متوجه آن میشوند؟
OpenAI میگوید رسیدن تغییرات robots.txt به سیستمهای جستجویش ممکن است حدود 24 ساعت طول بکشد، و Perplexity میگوید تا 24 ساعت. این فقط دسترسی را برمیگرداند. اینکه بعد از آن به صفحه شما استناد شود یا نه به مقایسه آن با منابع دیگر بستگی دارد که منتشر نشده است، پس تغییرات محتوایی را در بازه چند هفتهای بسنجید.
آیا فایل llms.txt باعث میشود دستیارهای هوش مصنوعی مرا پیشنهاد کنند؟
Google میگوید برای ظاهر شدن در AI Overviews یا AI Mode به فایلهای متنی هوش مصنوعی یا نشانهگذاری خاص نیازی ندارید. OpenAI، Perplexity و Anthropic در صفحههای راهنمای خزنده و جستجو که ما بررسی کردیم از llms.txt نامی نمیبرند، پس روی آن بهعنوان عامل رتبهبندی حساب نکنید.
آیا برچسب Trusted در Perplexity تعیین میکند به کدام سایتها استناد شود؟
Perplexity چنین چیزی نمیگوید. برچسبهای Government، Academic و Trusted را نتیجه بازبینی منبع برای کل وبسایتها توصیف میکند، میگوید نداشتن برچسب قضاوت منفی نیست و میگوید پرداختها روی برچسبها اثری ندارند.
منابع
- OpenAI: Overview of OpenAI crawlers
- OpenAI: Searching the web with ChatGPT
- OpenAI: Shopping with ChatGPT Search
- OpenAI: Ads in ChatGPT
- Perplexity: Perplexity crawlers
- Perplexity: How does Perplexity work?
- Perplexity: Understanding source labels
- Anthropic: Does Anthropic crawl data from the web, and how can site owners block the crawler?
- Google Search Central: AI features and your website
- Google Search Central: Organization structured data
- Google Search Central: Influence your byline dates
- Google Search Central: Creating helpful, reliable, people-first content
- AISeeWhy: گزارش دسترسی خزندههای هوش مصنوعی، 2026-11