Ændret robots.txt? Se, hvordan hver AI-crawler læser den
Én linje i den forkerte gruppe kan blokere ChatGPT-søgning, selvom du kun ville blokere AI-træning. Tjek resultatet for 16 crawlere.
Gratis · Ingen tilmelding · Svar på 30 sekunder
Hvilken gruppe der gælder
En crawler følger den gruppe, der nævner den ved navn, ikke gruppen *, hvilket overrasker mange website-ejere.
Søgning kontra træning
Bloker træningscrawlere, hvis du vil, og behold dem, der giver dig plads i AI-søgesvar.
Den præcise rettelse
Linjerne, der skal ændres, klar til at indsætte, og et nyt tjek, der bekræfter det.
Efter skiftet til Cloudflare · Efter et redesign · Efter skiftet til Shopify