Страници, отказали обхождането: 2
Тези страници отговориха с 401, 403, 429 или 503, или времето изтече, когато одитът ги изтегли като браузър. Често това е защитна стена, защита от ботове или ограничение на честотата, а не повредена страница. Проверете дали ботовете на търсачките и AI ботовете получават същия отговор.
Какво означава
Тези страници отговориха с 401, 403, 429 или 503 или времето за отговор изтече. Защитна стена или ограничение на заявките може да спира и ботовете; проверете дали ботовете на търсачките и AI ботовете получават същия отговор.
Защо това е важно за AI търсенето
Одитът изтегля много страници за кратко време от един сървър, така че ограничение на честотата може да отговори с 429 или 503, дори когато хората получават страницата. Ако същото правило се прилага за ботовете на търсачките и AI ботовете, тези страници не се изтеглят за техните индекси и не могат да бъдат цитирани в AI отговорите.
401 означава, че страницата изисква вход, което е очаквано за зоните на профила, но не и за публично съдържание. 503 на всяка страница може да означава, че режимът на поддръжка е останал включен. Тези страници се държат отделно от счупените връзки, защото корекцията зависи от това кой получава отказ.
Как да го поправите
- Отворете няколко от изброените URL адреси в частен прозорец на браузъра. Ако се зареждат, блокирането е насочено към автоматизираните заявки.
- Потърсете отказаните заявки в логовете на защитната стена, CDN или хостинга. Уверете се, че проверените ботове на търсачките като Googlebot и Bingbot и AI ботовете за търсене, които искате, са допуснати; много CDN, сред които и Cloudflare, имат настройка за проверени ботове.
- Ако причината е ограничение на честотата, вдигнете лимита за обикновените заявки за страници или изключете HTML страниците от него.
- Ако страниците отговарят с 401, премахнете входа от публичните страници или спрете да поставяте връзки към частни страници от публичните.
- Стартирайте отново одита на сайта от профила си, за да потвърдите резултата.
Как да потвърдите корекцията
След промяната натиснете „Проверете отново“ в отчета: той показва какво е поправено и как се е променила оценката.