robots.txt를 가져올 수 없습니다
robots.unreachable
의미
robots.txt가 상태 403(으)로 응답했거나 응답하지 않았습니다. RFC 9309에 따라 크롤러는 이 경우 사이트 전체를 허용하지 않는 것으로 처리합니다.
우선순위
P1
해결 방법
페이지를 무료로 점검해 보세요. 리포트에 내 사이트에서 이 발견 사항의 증거와 바로 붙여 넣을 수 있는 수정안이 표시됩니다: robots.txt 변경, Cloudflare 규칙, JSON-LD 마크업, llms.txt 초안 또는 짧은 안내입니다.
수정 확인 방법
변경한 뒤 리포트에서 "다시 점검"을 누르세요. 무엇이 수정되었고 점수가 어떻게 바뀌었는지 보여 줍니다.