Αλλάξατε το robots.txt; Δείτε πώς το διαβάζει κάθε crawler AI

Μία γραμμή στη λάθος ομάδα μπορεί να μπλοκάρει την αναζήτηση του ChatGPT ενώ θέλατε να μπλοκάρετε μόνο την εκπαίδευση AI. Ελέγξτε το αποτέλεσμα για 16 crawlers.

Δωρεάν · Χωρίς εγγραφή · Αποτελέσματα σε 30 δευτερόλεπτα

Ποια ομάδα ισχύει

Ένας crawler ακολουθεί την ομάδα που τον κατονομάζει, όχι την ομάδα *, κάτι που ξαφνιάζει πολλούς ιδιοκτήτες ιστότοπων.

Αναζήτηση ή εκπαίδευση

Μπλοκάρετε τους crawlers εκπαίδευσης αν θέλετε, κρατώντας εκείνους που σας φέρνουν στις απαντήσεις της αναζήτησης AI.

Η ακριβής διόρθωση

Οι γραμμές που πρέπει να αλλάξουν, έτοιμες για επικόλληση, και ένας νέος έλεγχος για επιβεβαίωση.

Αποκτήστε το πλήρες πακέτο

Μετά τη μετάβαση στο Cloudflare · Μετά από ανασχεδιασμό · Μετά τη μετάβαση στο Shopify