Странице које су одбиле пописивање: 2
Ове странице су одговориле са 401, 403, 429 или 503 или им је истекло време када их је аудит преузимао као прегледач. То је често заштитни зид, заштита од ботова или ограничење брзине, а не неисправна страница. Проверите да ли краулери претраге и AI краулери добијају исти одговор.
Шта то значи
Ове странице су одговориле са 401, 403, 429 или 503 или је истекло време. Можда заштитни зид или ограничење броја захтева зауставља и краулере; проверите да ли краулери претраге и AI добијају исти одговор.
Зашто је ово важно за AI претрагу
Аудит преузима много страница за кратко време са једног сервера, па ограничење брзине може да одговори са 429 или 503 чак и када људи добијају страницу. Ако исто правило важи за краулере претраге и AI краулере, ове странице се не преузимају за њихове индексе и не могу да буду цитиране у AI одговорима.
401 значи да страница захтева пријаву, што је очекивано за делове налога, али не и за јавни садржај. 503 на свакој страници може да значи да је режим одржавања остао укључен. Ове странице се држе одвојено од покварених линкова јер исправка зависи од тога ко је одбијен.
Како да исправите
- Отворите неколико наведених URL-ова у приватном прозору прегледача. Ако се учитају, блокада је усмерена на аутоматизоване захтеве.
- Потражите одбијене захтеве у логовима заштитног зида, CDN-а или хостинга. Проверите да су проверени краулери претраге као што су Googlebot и Bingbot, као и AI краулери претраге које желите, дозвољени; многи CDN-ови, међу њима и Cloudflare, имају подешавање за проверене ботове.
- Ако је узрок ограничење брзине, повећајте ограничење за обичне захтеве за страницама или из њега изоставите HTML странице.
- Ако странице одговарају са 401, уклоните пријаву са јавних страница или престаните да са јавних страница линкујете приватне.
- Поново покрените аудит сајта из свог налога да бисте потврдили резултат.
Како потврдити исправку
После измене притисните „Провери поново” у извештају: видећете шта је исправљено и како се оцена променила.