Следење на AI краулери
Правило во заштитниот ѕид, поставка на CDN или нов robots.txt може преку ноќ да ги заклучи AI краулерите надвор, а за луѓето ништо на вашиот сајт не изгледа расипано. Следењето повторно ги проверува вашите важни страници и ви пишува по е-пошта кога нешто ново ги блокира.
Бесплатно · Без регистрација · Резултат за 30 секунди
Планови и цени → Погледнете пример за целосен извештај →
Овој текст е машински преведен од англиски.
Што проверува следењето
Секое извршување е истата проверка како бесплатната проверка на нашата почетна страница. Вашата страница се презема како 16 AI краулери и краулери на пребарувачи, како curl и како десктоп прелистувач, секој со својот објавен user agent. robots.txt се оценува за секоја ознака на краулер и се проверуваат структурираните податоци, содржината, датумите, sitemap датотеките, hreflang и llms.txt на страницата. Резултатот е оцена од 0 до 100 и листа на наоди со приоритети од P1 до P3.
Кога добивате е-пошта
Следените страници повторно се проверуваат секој ден или секоја недела, по ваш избор. Добивате е-пошта кога ќе се појави нов проблем со блокирање, на пример краулер што сега добива 403 или страница со предизвик, или кога оцената ќе падне за 10 поени или повеќе. Пораката кажува што се променило и води до извештајот со поправката.
Што не може да види
Барањата доаѓаат од нашиот сервер со user agent на секој краулер, а не од сопствените IP адреси на операторите на краулерите. Заштитен ѕид што им верува на вистинските краулери според IP може да ги третира поинаку од нас, и секој наод за блокирање го наведува тоа. За да видите како им било одговорено на вистинските краулери, проверката на серверски дневници во платените планови го чита вашиот access log и ги брои посетите и статус-кодовите на секој AI краулер.
Планови со следење
- Pro, $22 месечно: 3 следени страници, за личен, некомерцијален сајт.
- Business, $88 месечно: 25 следени страници, за сајтови на компании и работа за клиенти.
- Agency, $288 месечно: 60 следени страници за многу сајтови на клиенти.
- Enterprise, $888 месечно: 100 следени страници.
Бесплатниот план нема следење: дава една проверка дневно со оцената и првиот наод. Плановите се плаќаат месечно, може да се откажат во секое време, а секое плаќање може целосно да се врати во рок од 14 дена.
Како да почнете
- Извршете ја бесплатната проверка на вашата најважна страница и погледнете го првиот наод.
- Изберете план на страницата со цени и најавете се со вашата е-пошта.
- Додајте ги страниците за следење во делот Следење во вашата сметка: почетната страница, цените, главните страници за производи или услуги и клучните статии.
- Изберете дневно или неделно. По поправка, повторно проверете ја страницата за да ја видите оцената пред и потоа.
Често поставувани прашања
Кои промени активираат известување?
Нов проблем со блокирање на следена страница, како краулер што сега е одбиен, или пад на оцената за 10 поени или повеќе од претходната проверка.
Дали следењето ги користи вистинските GPTBot или ClaudeBot?
Не. Ги испраќа нивните објавени user agents од нашиот сервер. Тоа покажува како вашиот заштитен ѕид и сервер ги третираат тие user agents; проверката на серверски дневници ги покажува вистинските посети.
Можам ли да следам сајтови на клиенти?
Да, во Business, Agency и Enterprise. Pro е за лична, некомерцијална употреба.
Можам ли да го пробам пред да платам?
Бесплатната проверка покажува што наоѓа едно извршување на која било страница. Самото следење бара платен план, кој можете да го откажете во секое време и да добиете поврат на парите во рок од 14 дена.