Страницата казва на търсачките да не я индексират
Страницата казва на търсачките да не я индексират: noindex или none присъства в мета таг robots, googlebot или bingbot или в HTTP хедър X-Robots-Tag. Находката показва кое от тях. Тогава Google и Bing не включват страницата в резултатите си. Премахнете правилото, ако страницата трябва да бъде намирана.
Какво означава
Правило noindex (meta) държи тази страница извън Google и Bing, а оттам и извън AI отговорите, изградени върху техния индекс. Премахнете го, ако страницата трябва да бъде намирана.
Защо това е важно за AI търсенето
Google и Bing спазват правилото noindex при следващото обхождане на страницата и тя отпада от резултатите им. Тогава AI отговорите и AI функциите за търсене, изградени върху тези индекси, също не намират страницата.
Noindex е правилен за страници като стъпки при плащане, резултати от вътрешно търсене или страници с благодарност. Проблем е, когато е останал от тестов сайт, зададен е от опция за целия сайт „не насърчавай търсачките“ или се изпраща като хедър от правило на сървър или CDN, което никой не вижда в HTML.
Как да го поправите
- Проверете източника в находката: мета таг в HTML или хедър
X-Robots-Tag. - При мета таг премахнете
noindexиnoneот него или изтрийте тага. В WordPress проверете дали Settings → Reading → „Discourage search engines from indexing this site“ е изключено и проверете собствените SEO настройки на страницата. В Shopify проверете кода на темата и приложенията, които добавят мета таг robots. - При хедър намерете къде се задава, например
add_headerв Nginx,Header setв Apache, файл_headers, Transform Rule в Cloudflare или middleware на фреймуърка, и го премахнете за тази страница. - Не блокирайте страницата в robots.txt едновременно с това: ботовете трябва да изтеглят страницата, за да видят, че noindex е премахнат.
- Натиснете „Проверете отново“ в отчета за страницата, за да потвърдите резултата.
Пример
# nginx: send noindex only where it belongs, not site-wide
location /search/ {
add_header X-Robots-Tag "noindex";
} Как да потвърдите корекцията
След промяната натиснете „Проверете отново“ в отчета: той показва какво е поправено и как се е променила оценката.