Праћење AI краулера

Правило заштитног зида, CDN подешавање или нови robots.txt могу преко ноћи да закључају AI краулере, а људима ништа на вашем сајту не изгледа покварено. Праћење поново проверава ваше важне странице и шаље вам имејл када их нешто ново блокира.

Бесплатно · Без регистрације · Резултат за 30 секунди

Планови и цене → Погледајте пример потпуног извештаја →

Овај текст је машински преведен са енглеског.

Шта праћење проверава

Свако покретање је иста провера као бесплатна провера на нашој почетној страници. Ваша страница се преузима као 16 AI краулера и краулера претраживача, као curl и као десктоп прегледач, сваки са својим објављеним user agent-ом. robots.txt се процењује за сваки токен краулера, а проверавају се структурирани подаци, садржај, датуми, мапе сајта, hreflang и llms.txt странице. Резултат је оцена од 0 до 100 и списак налаза са приоритетима од P1 до P3.

Када добијате имејл

Праћене странице се поново проверавају дневно или недељно, по вашем избору. Имејл добијате када се појави нови проблем са блокирањем, на пример краулер који сада добија 403 или страницу са изазовом, или када оцена падне за 10 поена или више. Имејл каже шта се променило и води на извештај са исправком.

Шта не може да види

Захтеви долазе са нашег сервера са user agent-ом сваког краулера, а не са IP адреса самих оператера краулера. Заштитни зид који праве краулере препознаје по IP адреси може да их третира другачије од нас, и сваки налаз о блокирању то наводи. Да бисте видели како је одговорено правим краулерима, провера серверских логова на плаћеним плановима чита ваш приступни лог и броји посете и статусне кодове сваког AI краулера.

Планови са праћењем

Бесплатни план нема праћење: даје једну проверу дневно са оценом и првим налазом. Планови се наплаћују месечно, могу се отказати у било ком тренутку, а свака уплата може се у потпуности вратити у року од 14 дана.

Како да почнете

  1. Покрените бесплатну проверу на својој најважнијој страници и погледајте први налаз.
  2. Изаберите план на страници са ценама и пријавите се својим имејлом.
  3. Додајте странице за праћење под Праћење у свом налогу: почетну страницу, цене, главне странице производа или услуга и кључне чланке.
  4. Изаберите дневно или недељно. После исправке поново проверите страницу да бисте видели оцену пре и после.

Честа питања

Које промене покрећу упозорење?

Нови проблем са блокирањем на праћеној страници, као што је краулер који је сада одбијен, или пад оцене за 10 поена или више у односу на претходну проверу.

Да ли праћење користи прави GPTBot или ClaudeBot?

Не. Са нашег сервера шаље њихове објављене user agent-е. То показује како ваш заштитни зид и сервер третирају те user agent-е; провера серверских логова показује стварне посете.

Могу ли да пратим сајтове клијената?

Да, на плановима Business, Agency и Enterprise. Pro је за личну, некомерцијалну употребу.

Могу ли да га испробам пре плаћања?

Бесплатна провера показује шта једно покретање пронађе на било којој страници. Само праћење захтева плаћени план, који можете да откажете у било ком тренутку и добијете повраћај новца у року од 14 дана.

Повезани алати и водичи