Praćenje AI crawlera

Pravilo vatrozida, postavka CDN-a ili novi robots.txt mogu preko noći zaključati AI crawlere, a ljudima ništa na vašoj web-stranici ne izgleda pokvareno. Praćenje ponovno provjerava vaše važne stranice i šalje vam e-poruku kad ih nešto novo blokira.

Besplatno · Bez registracije · Rezultat za 30 sekundi

Planovi i cijene → Pogledajte primjer potpunog izvještaja →

Ovaj je tekst strojno preveden s engleskog.

Što praćenje provjerava

Svako pokretanje ista je provjera kao besplatna provjera na našoj početnoj stranici. Vaša se stranica dohvaća kao 16 AI i pretraživačkih crawlera, kao curl i kao preglednik za računala, svaki sa svojim objavljenim user agentom. robots.txt se procjenjuje za svaki token crawlera, a provjeravaju se strukturirani podaci, sadržaj, datumi, sitemapovi, hreflang i llms.txt stranice. Rezultat je ocjena od 0 do 100 i popis nalaza s prioritetima od P1 do P3.

Kad dobivate e-poruku

Praćene stranice ponovno se provjeravaju dnevno ili tjedno, po vašem izboru. E-poruku dobivate kad se pojavi novi problem s blokiranjem, primjerice crawler koji sada dobiva 403 ili stranicu s izazovom, ili kad ocjena padne za 10 bodova ili više. E-poruka kaže što se promijenilo i vodi na izvještaj s ispravkom.

Što ne može vidjeti

Zahtjevi dolaze s našeg poslužitelja s user agentom svakog crawlera, a ne s IP adresa samih operatera crawlera. Vatrozid koji prave crawlere prepoznaje po IP-u može ih tretirati drukčije od nas, i svaki nalaz o blokadi to navodi. Da vidite kako je odgovoreno pravim crawlerima, provjera zapisnika poslužitelja na plaćenim planovima čita vaš zapisnik pristupa i broji posjete i statusne kodove svakog AI crawlera.

Planovi s praćenjem

Besplatni plan nema praćenje: daje jednu provjeru dnevno s ocjenom i prvim nalazom. Planovi se naplaćuju mjesečno, mogu se otkazati u bilo kojem trenutku, a svako plaćanje može se u cijelosti vratiti u roku od 14 dana.

Kako početi

  1. Pokrenite besplatnu provjeru na svojoj najvažnijoj stranici i pogledajte prvi nalaz.
  2. Odaberite plan na stranici s cijenama i prijavite se svojom e-adresom.
  3. Dodajte stranice za praćenje pod Praćenje u svom računu: početnu stranicu, cijene, glavne stranice proizvoda ili usluga i ključne članke.
  4. Odaberite dnevno ili tjedno. Nakon ispravka ponovno provjerite stranicu da vidite ocjenu prije i poslije.

Česta pitanja

Koje promjene pokreću upozorenje?

Novi problem s blokiranjem na praćenoj stranici, kao što je crawler koji je sada odbijen, ili pad ocjene za 10 bodova ili više od prethodne provjere.

Koristi li praćenje pravi GPTBot ili ClaudeBot?

Ne. S našeg poslužitelja šalje njihove objavljene user agente. To pokazuje kako vaš vatrozid i poslužitelj tretiraju te user agente; provjera zapisnika poslužitelja pokazuje stvarne posjete.

Mogu li pratiti web-stranice klijenata?

Da, na planovima Business, Agency i Enterprise. Pro je za osobnu, nekomercijalnu upotrebu.

Mogu li ga isprobati prije plaćanja?

Besplatna provjera pokazuje što jedno pokretanje pronalazi na bilo kojoj stranici. Samo praćenje zahtijeva plaćeni plan, koji možete otkazati u bilo kojem trenutku i dobiti povrat novca u roku od 14 dana.

Povezani alati i vodiči