Zmieniłeś robots.txt? Zobacz, jak odczytuje go każdy crawler AI
Jedna linia w złej grupie może zablokować wyszukiwanie ChatGPT, choć chciałeś zablokować tylko trenowanie AI. Sprawdź wynik dla 16 crawlerów.
Za darmo · Bez rejestracji · Wynik w 30 sekund
Która grupa ma zastosowanie
Crawler stosuje się do grupy, która wymienia go z nazwy, a nie do grupy *, co zaskakuje wielu właścicieli witryn.
Wyszukiwanie a trenowanie
Zablokuj crawlery trenujące, jeśli chcesz, a zostaw te, dzięki którym trafiasz do odpowiedzi wyszukiwarek AI.
Dokładna poprawka
Linie do zmiany, gotowe do wklejenia, i ponowne sprawdzenie dla potwierdzenia.
Po przejściu na Cloudflare · Po redesignie · Po przejściu na Shopify