Hogyan működik a pontszám
Az AISeeWhy azt vizsgálja, hogy az AI-crawlerek és az AI-keresők tudják-e olvasni és idézni egy weboldalt. Minden, ami a pontszámot befolyásolja, ezen az oldalon szerepel.
A képlet
Pontszám = 100 − 15 × (P1 találatok) − 6 × (P2 találatok) − 2 × (P3 találatok), de soha nem kevesebb 0-nál. Egy oldal akkor számít láthatónak az AI számára, ha a pontszám legalább 70, és nincs P1 találat.
Prioritások
- P1, kritikus: az AI-keresők vagy AI-asszisztensek nem tudják olvasni az oldalt, vagy nem bízhatnak a tartalmában.
- P2, fontos: az oldalt nehezebb megérteni, megtalálni vagy idézni.
- P3, hasznos kiegészítés, vagy szabályzati döntés, például a tanítási adatokat gyűjtő crawlerek blokkolása.
Mit vizsgálunk
- Az oldalt 16 AI- és keresőcrawlerként, curlként és asztali böngészőként kérjük le, mindegyik crawler közzétett user agentjével. Ha egy crawler hibát, ellenőrző oldalt vagy a böngészőétől eltérő oldalt kap, azt a HTTP-státusszal és a tűzfal ismertetőjelével jelentjük.
- A robots.txt-t az RFC 9309 szerint elemezzük minden crawlertokenre, azokra is, amelyeket soha nem küldenek user agentként (Google-Extended, Applebot-Extended).
- Ellenőrizzük az oldal strukturált adatait (JSON-LD), a válasszal kezdődő tartalmat, a dátumokat, a sitemapeket, a hreflang-alternatívákat és az llms.txt-t.
- Ha egy crawler átmeneti hibába ütközik (hálózati hiba, 429, 5xx), egyszer újrapróbáljuk, mielőtt beszámítanánk.
Egy külső teszt korlátai
- A kérések az AISeeWhy szerveréről érkeznek, nem a crawlerek tulajdonosainak IP-címeiről. Az a tűzfal, amely IP alapján bízik meg a valódi crawlerekben, minket blokkolhat, őket pedig beengedheti, és fordítva. A szervernapló-ellenőrzés megmutatja, milyen választ kaptak a valódi crawlerek.
- JavaScriptet nem futtatunk, mert az AI-crawlerek sem futtatják.
- Egy URL egy oldal. Teljes webhelyhez használjon tömeges auditot vagy sitemapet.
- A jobb pontszám kevesebb technikai akadályt jelent. Nem garantálja, hogy egy AI-asszisztens megemlíti vagy idézi Önt.
Szabályok
A szabályok jelenlegi verziója: 2026.11. A verzió minden alkalommal változik, amikor egy szabály, egy prioritás vagy a képlet változik, és minden jelentés feltünteti, melyik verzióval készült.