Promijenili ste robots.txt? Pogledajte kako ga čita svaki AI crawler
Jedan redak u pogrešnoj grupi može blokirati ChatGPT pretraživanje, a htjeli ste blokirati samo AI treniranje. Provjerite rezultat za 16 crawlera.
Besplatno · Bez registracije · Rezultat za 30 sekundi
Koja se grupa primjenjuje
Crawler slijedi grupu koja ga imenuje, a ne grupu *, što iznenadi mnoge vlasnike stranica.
Pretraživanje ili treniranje
Blokirajte crawlere za treniranje ako želite, a zadržite one koji vas stavljaju u odgovore AI pretraživanja.
Točan ispravak
Retci koje treba promijeniti, spremni za lijepljenje, i ponovna provjera za potvrdu.
Nakon prelaska na Cloudflare · Nakon redizajna · Nakon prelaska na Shopify