Monitoring AI crawlerov

Pravidlo firewallu, nastavenie CDN alebo nový robots.txt môžu AI crawlery cez noc zablokovať, a ľuďom sa na vašom webe nebude nič zdať pokazené. Monitoring znova kontroluje vaše dôležité stránky a pošle vám e-mail, keď ich zablokuje niečo nové.

Zadarmo · Bez registrácie · Výsledok za 30 sekúnd

Plány a ceny → Pozrite si ukážku úplnej správy →

Tento text bol strojovo preložený z angličtiny.

Čo monitoring kontroluje

Každý beh je rovnaká kontrola ako bezplatná kontrola na našej domovskej stránke. Vaša stránka sa stiahne ako 16 AI a vyhľadávacích crawlerov, ako curl a ako desktopový prehliadač, každý so svojím zverejneným user agentom. robots.txt sa vyhodnotí pre každý token crawlera a skontrolujú sa štruktúrované dáta, obsah, dátumy, sitemapy, hreflang a llms.txt stránky. Výsledkom je skóre od 0 do 100 a zoznam zistení s prioritami P1 až P3.

Kedy dostanete e-mail

Monitorované stránky sa znova kontrolujú denne alebo týždenne, podľa vašej voľby. E-mail dostanete, keď sa objaví nový blokujúci problém, napríklad crawler, ktorý teraz dostáva 403 alebo overovaciu stránku, alebo keď skóre klesne o 10 bodov či viac. E-mail hovorí, čo sa zmenilo, a odkazuje na správu s opravou.

Čo nevidí

Požiadavky prichádzajú z nášho servera s user agentom každého crawlera, nie z vlastných IP adries prevádzkovateľov crawlerov. Firewall, ktorý skutočným crawlerom dôveruje podľa IP, s nimi môže zaobchádzať inak ako s nami, a každé zistenie o blokovaní to uvádza. Ak chcete vidieť, ako sa odpovedalo skutočným crawlerom, kontrola logov servera v platených plánoch prečíta váš prístupový log a spočíta návštevy a stavové kódy každého AI crawlera.

Plány s monitoringom

Bezplatný plán monitoring nemá: ponúka jednu kontrolu denne so skóre a prvým zistením. Plány sa účtujú mesačne, dajú sa kedykoľvek zrušiť a každú platbu možno do 14 dní vrátiť v plnej výške.

Ako začať

  1. Spustite bezplatnú kontrolu na svojej najdôležitejšej stránke a pozrite sa na prvé zistenie.
  2. Vyberte si plán na stránke s cenami a prihláste sa svojím e-mailom.
  3. Pridajte stránky na sledovanie v sekcii Monitoring vo svojom účte: domovskú stránku, cenník, hlavné stránky produktov alebo služieb a kľúčové články.
  4. Zvoľte denne alebo týždenne. Po oprave stránku znova skontrolujte a uvidíte skóre pred a po.

Časté otázky

Ktoré zmeny spustia upozornenie?

Nový blokujúci problém na monitorovanej stránke, napríklad crawler, ktorý je teraz odmietnutý, alebo pokles skóre o 10 bodov či viac od predchádzajúcej kontroly.

Používa monitoring skutočný GPTBot alebo ClaudeBot?

Nie. Posiela ich zverejnené user agenty z nášho servera. To ukazuje, ako váš firewall a server s týmito user agentmi zaobchádzajú; skutočné návštevy ukazuje kontrola logov servera.

Môžem monitorovať weby klientov?

Áno, v plánoch Business, Agency a Enterprise. Pro je určený na osobné nekomerčné použitie.

Môžem si to vyskúšať pred zaplatením?

Bezplatná kontrola ukáže, čo jeden beh nájde na ľubovoľnej stránke. Samotný monitoring vyžaduje platený plán, ktorý môžete kedykoľvek zrušiť a do 14 dní dostať peniaze späť.

Súvisiace nástroje a návody