GPTBot басқа жерге бағытталады

Қысқа жауап

Осы краулердің user agent атымен жіберілген сұрау браузер жететін беттен басқа жерде аяқталды: басқа хостта немесе login, signin, captcha не blocked сөздері бар жолда. Краулер адамдар сияқты сол URL-ға жетуі үшін user agent-ке бағытталған қайта бағыттау ережесін алып тастаңыз.

access.redirect_diff · Басымдық: P1–P3, краулер түріне қарай

Бұл нені білдіреді

GPTBot user agent атымен жіберілген сұрау браузер алатын бетке емес, https://example.com/b мекенжайына жетеді.

Бұл ЖИ іздеу үшін неге маңызды

Кіру формасына, captcha бетіне немесе басқа доменге қайта бағытталған краулер өзі келген мазмұнды ешқашан оқымайды. Сонда жауап жүйелері бетті өткізіп жібереді немесе мазмұнды ол аяқталған URL-ға телиді, ал бұл көбіне дәйексөз келтіруге тұрарлық ештеңесі жоқ жалпы бет болады.

Мұндай қайта бағыттаулар әдетте user agent бойынша әрекет ететін бот қорғанысынан, paywall, мүшелік немесе гео ережелерінен туындайды. OAI-SearchBot, Claude-User және PerplexityBot сияқты іздеу және пайдаланушы краулерлеріне де оқыту краулерлері сияқты әсер етеді, сондықтан бұл мәселе краулердің рөліне қарай бағаланады.

Қалай түзетуге болады

  1. Краулердің қайда жіберілгенін көру үшін мәселедегі соңғы URL-ды оқыңыз. AISeeWhy есебі дәлелдерді және қоюға дайын түзетуді көрсетеді; нәтижені растау үшін кейін «Қайта тексеру» батырмасын басыңыз.
  2. CDN-дегі қайта бағыттау ережелерін (Cloudflare Redirect Rules, Page Rules немесе Workers), nginx-тегі return 301/302 немесе rewrite блоктарын және Apache-тағы user agent шарты бар RewriteRule жолдарын тексеріңіз.
  3. WordPress немесе Shopify-да белгісіз келушілерді кіру немесе ел бетіне жіберетін мүшелік, жас тексеру, техникалық қызмет көрсету режимі және гео-қайта бағыттау қолданбаларын қараңыз.
  4. Краулерді ережеден босатыңыз немесе қайта бағыттаудың орнына жабық мазмұнның жалпыға қолжетімді қысқаша сипаттамасын бастапқы URL-да көрсетіңіз.

Түзетуді қалай растауға болады

Өзгерістен кейін есептегі "Қайта тексеру" батырмасын басыңыз: ол не түзетілгенін және баға қалай өзгергенін көрсетеді.

Бетімді тексеру →

Байланысты нұсқаулықтар

Барлық мәселелер және баға қалай есептеледі