לא ניתן לאחזר את robots.txt
robots.unreachable
מה זה אומר
robots.txt השיב בסטטוס 403 או שלא השיב כלל. לפי RFC 9309 סורקים רואים אז את כל האתר כאסור.
עדיפות
P1
איך לתקן
הריצו בדיקה חינמית של העמוד שלכם. הדוח מציג את הראיות לממצא הזה באתר שלכם ותיקון מוכן להדבקה: שינוי ב-robots.txt, כלל Cloudflare, סימון JSON-LD, טיוטת llms.txt או הוראה קצרה.
איך לוודא את התיקון
אחרי השינוי, לחצו על "בדיקה חוזרת" בדוח: הוא יפרט מה תוקן ואיך הציון השתנה.