Αλλάξατε το robots.txt; Δείτε πώς το διαβάζει κάθε crawler AI
Μία γραμμή στη λάθος ομάδα μπορεί να μπλοκάρει την αναζήτηση του ChatGPT ενώ θέλατε να μπλοκάρετε μόνο την εκπαίδευση AI. Ελέγξτε το αποτέλεσμα για 16 crawlers.
Δωρεάν · Χωρίς εγγραφή · Αποτελέσματα σε 30 δευτερόλεπτα
Ποια ομάδα ισχύει
Ένας crawler ακολουθεί την ομάδα που τον κατονομάζει, όχι την ομάδα *, κάτι που ξαφνιάζει πολλούς ιδιοκτήτες ιστότοπων.
Αναζήτηση ή εκπαίδευση
Μπλοκάρετε τους crawlers εκπαίδευσης αν θέλετε, κρατώντας εκείνους που σας φέρνουν στις απαντήσεις της αναζήτησης AI.
Η ακριβής διόρθωση
Οι γραμμές που πρέπει να αλλάξουν, έτοιμες για επικόλληση, και ένας νέος έλεγχος για επιβεβαίωση.
Μετά τη μετάβαση στο Cloudflare · Μετά από ανασχεδιασμό · Μετά τη μετάβαση στο Shopify