Как считается оценка
AISeeWhy проверяет, могут ли AI-краулеры и AI-поиск прочитать и процитировать веб-страницу. Всё, что влияет на оценку, описано на этой странице.
Формула
Оценка = 100 − 15 × (находки P1) − 6 × (находки P2) − 2 × (находки P3), но не ниже 0. Страница считается видимой для AI, если оценка 70 или выше и нет ни одной находки P1.
Приоритеты
- P1, критично: AI-поиск или AI-ассистенты не могут прочитать страницу или не могут доверять её содержимому.
- P2, важно: страницу сложнее понять, найти или процитировать.
- P3, желательно, или выбор политики, например блокировка краулеров, собирающих данные для обучения.
Что проверяется
- Страница загружается от имени 16 AI- и поисковых краулеров, как curl и как десктопный браузер, с опубликованным user agent каждого краулера. Если краулер получает ошибку, проверку (challenge) или не ту страницу, что браузер, это отражается в отчёте с HTTP-статусом и сигнатурой файрвола.
- robots.txt разбирается по RFC 9309 для каждого токена краулера, включая токены, которые никогда не отправляются как user agent (Google-Extended, Applebot-Extended).
- Проверяются структурированные данные страницы (JSON-LD), подача ответа в начале текста, даты, карты сайта, альтернативы hreflang и llms.txt.
- Если краулер столкнулся с временным сбоем (сетевая ошибка, 429, 5xx), запрос повторяется один раз, прежде чем сбой будет засчитан.
Ограничения внешнего теста
- Запросы идут с сервера AISeeWhy, а не с IP-адресов владельцев краулеров. Файрвол, который доверяет настоящим краулерам по IP, может блокировать нас, но пропускать их, и наоборот. Проверка журналов сервера показывает, что получили настоящие краулеры.
- JavaScript не выполняется, потому что AI-краулеры его не выполняют.
- Один URL — одна страница. Для всего сайта используйте пакетные аудиты или карту сайта.
- Более высокая оценка означает меньше технических барьеров. Она не гарантирует, что AI-ассистент упомянет или процитирует вас.
Правила
Текущая версия правил: 2026.11. Версия меняется при каждом изменении правила, приоритета или формулы, и каждый отчёт показывает версию, по которой он создан.