Страници, отказали обхождането: 2

Кратък отговор

Тези страници отговориха с 401, 403, 429 или 503, или времето изтече, когато одитът ги изтегли като браузър. Често това е защитна стена, защита от ботове или ограничение на честотата, а не повредена страница. Проверете дали ботовете на търсачките и AI ботовете получават същия отговор.

crawl.unreachable · Приоритет: P1–P3, според типа бот

Какво означава

Тези страници отговориха с 401, 403, 429 или 503 или времето за отговор изтече. Защитна стена или ограничение на заявките може да спира и ботовете; проверете дали ботовете на търсачките и AI ботовете получават същия отговор.

Защо това е важно за AI търсенето

Одитът изтегля много страници за кратко време от един сървър, така че ограничение на честотата може да отговори с 429 или 503, дори когато хората получават страницата. Ако същото правило се прилага за ботовете на търсачките и AI ботовете, тези страници не се изтеглят за техните индекси и не могат да бъдат цитирани в AI отговорите.

401 означава, че страницата изисква вход, което е очаквано за зоните на профила, но не и за публично съдържание. 503 на всяка страница може да означава, че режимът на поддръжка е останал включен. Тези страници се държат отделно от счупените връзки, защото корекцията зависи от това кой получава отказ.

Как да го поправите

  1. Отворете няколко от изброените URL адреси в частен прозорец на браузъра. Ако се зареждат, блокирането е насочено към автоматизираните заявки.
  2. Потърсете отказаните заявки в логовете на защитната стена, CDN или хостинга. Уверете се, че проверените ботове на търсачките като Googlebot и Bingbot и AI ботовете за търсене, които искате, са допуснати; много CDN, сред които и Cloudflare, имат настройка за проверени ботове.
  3. Ако причината е ограничение на честотата, вдигнете лимита за обикновените заявки за страници или изключете HTML страниците от него.
  4. Ако страниците отговарят с 401, премахнете входа от публичните страници или спрете да поставяте връзки към частни страници от публичните.
  5. Стартирайте отново одита на сайта от профила си, за да потвърдите резултата.

Как да потвърдите корекцията

След промяната натиснете „Проверете отново“ в отчета: той показва какво е поправено и как се е променила оценката.

Проверете страницата ми →

Всички находки и как работи оценката