12 AEO kontrol, ktoré sa oplatí urobiť pred zverejnením stránky (2027)
Pred zverejnením overte, že URL vracia 200 bez presmerovaní, robots.txt povoľuje každý vyhľadávací AI crawler, firewall im posiela skutočnú stránku a odpoveď je v surovom HTML. Potom skontrolujte, že nezostal noindex ani nosnippet, že je jeden canonical, odpoveď pod H1, platné a zodpovedajúce JSON-LD, zhodné dátumy, záznam v sitemap s internými odkazmi a hreflang, a požiadajte o indexovanie.
Väčšina stránok, ktoré sa nikdy neobjavia v odpovediach AI, zlyhá na niečom nudnom: zabudnutý noindex, pravidlo firewallu, canonical mieriaci na staging. Týchto dvanásť kontrol zachytí takéto chyby pred spustením. Každá zaberie pár minút, väčšine stačí terminál a URL stránky a sú zoradené v poradí, v akom na ne narazí crawler.
Na tejto stránke
- Ako dlho ktorá kontrola trvá?
- 1. URL vracia 200 bez reťazca presmerovaní
- 2. robots.txt povoľuje stránku každému vyhľadávaciemu AI crawleru
- 3. Firewall posiela AI crawlerom skutočnú stránku
- 4. Odpoveď je v surovom HTML
- 5. Nezostal žiadny noindex ani nosnippet
- 6. Jeden canonical, absolútny a odkazujúci sám na seba
- 7. Title a H1 hovoria, na čo stránka odpovedá, a odpoveď je hneď pod nimi
- 8. JSON-LD sa dá spracovať a zodpovedá viditeľnému textu
- 9. Viditeľný dátum, dátumy v značkovaní a lastmod v sitemap sa zhodujú
- 10. Stránka je v sitemap a odkazujú na ňu súvisiace stránky
- 11. hreflang je vzájomný a má x-default
- 12. Požiadajte vyhľadávače o prehľadanie novej stránky
- Ako sme tieto kontroly vyberali
Ako dlho ktorá kontrola trvá?
Hrubý odhad pre jednu stránku s potrebným nástrojom. Kontroly 1 až 5 robte pri každej stránke, ostatné raz pre šablónu a potom námatkovo.
- 1. Stav 200: 1 minúta, curl.
- 2. robots.txt pre každý crawler: 3 minúty, prehliadač alebo curl.
- 3. Odpoveď firewallu: 3 minúty, curl.
- 4. Text v surovom HTML: 2 minúty, curl.
- 5. Žiadny zabudnutý noindex ani nosnippet: 2 minúty, curl.
- 6. Jeden canonical: 2 minúty, zobrazenie zdrojového kódu.
- 7. Title, H1 a krátka odpoveď: 5 minút, prečítanie stránky.
- 8. Platné a zodpovedajúce JSON-LD: 5 minút, Test rozšírených výsledkov alebo Schema Markup Validator.
- 9. Zhodné dátumy: 3 minúty, stránka, značkovanie a sitemap.
- 10. Sitemap a interné odkazy: 5 minút, sitemap.xml a váš CMS.
- 11. hreflang: 5 minút, len pre viacjazyčné weby.
- 12. Žiadosť o indexovanie: 2 minúty, Search Console a IndexNow.
1. URL vracia 200 bez reťazca presmerovaní
Crawler má dostať priamo stránku so stavom 200 na presnej URL, ktorú budete zdieľať a uvediete v sitemap. Každé presmerovanie je ďalší krok, ktorý môže zlyhať, a stránka, ktorá vracia 200 so správou „nenájdené“, je soft 404, ktorý vyhľadávače môžu vyradiť.
# Final status, number of redirects and final URL
curl -s -o /dev/null -L -w "%{http_code} redirects=%{num_redirects} %{url_effective}\n" https://example.com/new-page/ V poriadku: 200 redirects=0 a späť rovnaká URL. Oprava: odkazujte na konečnú URL a uvádzajte ju v sitemap a zo starých adries nechajte najviac jedno presmerovanie.
2. robots.txt povoľuje stránku každému vyhľadávaciemu AI crawleru
Čítajte robots.txt tak, ako ho prečíta každý crawler. Skupina, ktorá crawler menuje, preň nahrádza skupinu User-agent: *, a podľa RFC 9309 vyhráva najdlhšie zodpovedajúce pravidlo, pri zhode vyhráva Allow.
Skontrolujte aspoň OAI-SearchBot, Claude-SearchBot, Claude-User, PerplexityBot a Googlebot. Nová sekcia ako /guides/ môže spadnúť pod staré pravidlo Disallow: /g, pretože pravidlá sa porovnávajú podľa prefixu cesty. Overte tiež, že samotný robots.txt vracia 200 alebo 404: podľa RFC 9309 chyba servera znamená, že crawlery majú považovať celý web za zakázaný.
V poriadku: žiadne pravidlo pre tieto tokeny cestu nezakazuje. Náš návod na testovanie robots.txt ukazuje, ako otestovať jednu URL pre jeden crawler.
3. Firewall posiela AI crawlerom skutočnú stránku
Vyžiadajte si stránku s user agentom prehliadača a s user agentmi crawlerov a porovnajte stav a veľkosť. Ochrana proti botom, ktorá reaguje na názov, môže len crawlerom vrátiť 403, 429 alebo overovaciu stránku.
URL=https://example.com/new-page/
for UA in "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36" \
"Mozilla/5.0 (compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot)" \
"Mozilla/5.0 (compatible; Claude-SearchBot)" \
"Mozilla/5.0 (compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot)"; do
curl -s -o /dev/null -w "%{http_code} %{size_download} $UA\n" -A "$UA" "$URL"
done V poriadku: každý riadok ukazuje 200 a podobnú veľkosť. Oveľa menšia veľkosť zvyčajne znamená overovaciu stránku. Tieto reťazce testujú pravidlá reagujúce na názov; skutočné crawlery navyše prichádzajú zo zverejnených rozsahov IP, čo test z vášho počítača nenapodobní, preto skontrolujte aj povoľovacie pravidlá firewallu pre tieto rozsahy.
4. Odpoveď je v surovom HTML
Vyhľadajte v HTML, ktoré posiela server, vetu zo svojej odpovede. Inšpektor prvkov v prehliadači ukazuje stránku po spustení skriptov, čo väčšina crawlerov nedostane.
curl -s https://example.com/new-page/ | grep -c "a sentence from your short answer" V poriadku: 1 alebo viac. 0 znamená, že text pridáva JavaScript, a OpenAI, Anthropic ani Perplexity nedokumentujú, že by ho ich crawlery spúšťali. Vykreslite stránku na serveri alebo pri zostavení; náš návod o obsahu v JavaScripte a AI crawleroch uvádza možnosti.
5. Nezostal žiadny noindex ani nosnippet
Stagingové weby často bežia s noindex a šablóna ho môže preniesť do produkcie. Skontrolujte metaznačku robots aj HTTP hlavičku X-Robots-Tag, pretože platí ktorákoľvek z nich.
curl -s -D - -o /tmp/page.html https://example.com/new-page/ | grep -i "x-robots-tag"
grep -i -o '<meta[^>]*name="robots"[^>]*>' /tmp/page.html V poriadku: nič sa nevypíše, alebo len index, follow a podobne. Google uvádza, že stránka musí byť indexovaná a mať nárok na úryvok, aby sa objavila v AI Overviews a AI Mode, a že nosnippet tiež bráni jej použitiu ako priameho vstupu pre tieto funkcie.
6. Jeden canonical, absolútny a odkazujúci sám na seba
Stránka má deklarovať presne jeden rel="canonical" ako absolútnu URL, ktorá mieri na adresu, ktorú zverejňujete. Google označuje canonical za silný signál, nie príkaz, a varuje pred relatívnymi URL a protichodnými signálmi, napríklad sitemap s inou adresou.
Časté chyby pri spustení sú canonical skopírovaný zo šablónovej stránky, canonical, ktorý stále mieri na stagingový host, a dve značky canonical naraz, z témy a z pluginu.
V poriadku: jedna značka, ostrá URL, rovnaký protokol a host ako v sitemap.
7. Title a H1 hovoria, na čo stránka odpovedá, a odpoveď je hneď pod nimi
Prečítajte si hornú časť stránky ako niekto cudzí. Title a H1 majú pomenovať otázku alebo tému slovami zákazníkov a prvé dve až tri vety pod H1 na ňu majú úplne odpovedať.
Držte title na približne 60 znakoch, aby sa vo výsledkoch vyhľadávania menej často skracoval. Píšte krátku odpoveď tak, aby dávala zmysel aj citovaná samostatne, s číslami, jednotkami a celým názvom produktu.
V poriadku: kto si prečíta len prvý odsek, pozná odpoveď. Náš zoznam spôsobov, ako sa dostať do citácií v odpovediach AI, rozoberá písanie pre citácie podrobnejšie.
8. JSON-LD sa dá spracovať a zodpovedá viditeľnému textu
Poškodené JSON-LD sa ignoruje celé, takže jedna chýbajúca čiarka odstráni všetko. Vložte URL do Testu rozšírených výsledkov od Googlu alebo do Schema Markup Validator a opravte každú chybu.
Potom porovnajte hodnoty so stránkou. Nadpis, dátumy, cena, mena a názov organizácie v značkovaní majú byť tie, ktoré vidí čitateľ. Google uvádza, že jeho funkcie AI nepotrebujú žiadne špeciálne značkovanie a že štruktúrované údaje majú zodpovedať viditeľnému textu.
V poriadku: žiadne chyby a každá hodnota je na stránke viditeľná. Preskočte, ak: pre daný typ stránky neexistuje vhodné značkovanie; obyčajná stránka je lepšia než chybné značkovanie.
9. Viditeľný dátum, dátumy v značkovaní a lastmod v sitemap sa zhodujú
Zobrazte na stránke označený dátum, rovnaké dátumy použite v datePublished a dateModified a v sitemap nastavte lastmod na poslednú podstatnú zmenu. Google žiada, aby sa viditeľné dátumy a dátumy v značkovaní zhodovali, a uvádza, že lastmod používa len vtedy, keď je sústavne a overiteľne presný.
Generátor sitemap, ktorý pri každom zostavení označí všetky URL dnešným dátumom, urobí z lastmod nepoužiteľný údaj pre všetky stránky, nielen pre tú novú.
V poriadku: tri miesta, jeden dátum.
10. Stránka je v sitemap a odkazujú na ňu súvisiace stránky
Crawlery nachádzajú stránky cez odkazy a sitemapy. Pridajte novú URL do XML sitemap v presnom kanonickom tvare a odkážte na ňu aspoň z dvoch súvisiacich stránok a z rozcestníka alebo prehľadovej stránky.
Súbor sitemap pojme až 50 000 URL a 50 MB bez kompresie; väčšie weby potrebujú index sitemap. Google uvádza, že ignoruje priority a changefreq, takže na ne nestrácajte čas. Stránka bez interných odkazov je sirota, ktorú crawlery nájdu neskoro alebo vôbec.
V poriadku: URL je v sitemap a aspoň dve stránky na ňu odkazujú s opisným textom odkazu.
11. hreflang je vzájomný a má x-default
Ak stránka existuje vo viacerých jazykoch, každá verzia má uvádzať všetky verzie vrátane seba a každá musí odkazovať späť. Google ignoruje anotácie hreflang, ktoré nie sú potvrdené z druhej strany. Pridajte x-default pre verziu, ktorá sa zobrazí, keď žiadny jazyk nezodpovedá.
Preskočte, ak: web má len jeden jazyk. Náš návod k hreflang x-default vysvetľuje, kedy ho potrebujete.
12. Požiadajte vyhľadávače o prehľadanie novej stránky
Keď je stránka zverejnená a prejde kontrolami vyššie, dajte o nej vyhľadávačom vedieť. V Google Search Console použite na novú URL Kontrolu webovej adresy a zvoľte Požiadať o indexovanie. Pre Bing a ďalšie vyhľadávače, ktoré podporujú IndexNow, odošlite URL na endpoint IndexNow so svojím kľúčom; Bing upozorňuje, že to nezaručuje prehľadanie ani indexovanie.
AI asistenti nemajú žiadny formulár na odoslanie. Ich crawlery nájdu stránku cez odkazy a vyhľadávanie, a preto sú kontroly 2, 3 a 10 také dôležité. Ak zverejňujete súbor llms.txt, pridajte stránku aj tam; Google uvádza, že ho jeho Vyhľadávanie nepoužíva, takže ho berte ako voliteľný.
V poriadku: Kontrola webovej adresy ukazuje, že zverejnenú stránku možno indexovať.
Ako sme tieto kontroly vyberali
Zoznam sleduje cestu crawlera: dostať sa na URL, prečítať robots.txt, prejsť firewallom, prečítať HTML a potom ho interpretovať. Každá kontrola vychádza z toho, čo OpenAI, Anthropic, Perplexity a Google dokumentujú o svojich crawleroch, z RFC 9309 pre robots.txt a z odporúčaní Googlu k canonical, dátumom, sitemapám a hreflang. Vynechali sme kontroly bez zdokumentovaného vplyvu na odpovede AI, napríklad hustotu kľúčových slov alebo cieľový počet slov.
Kontroly ukazujú, že stránku možno prečítať; nemôžu ukázať, že bude citovaná. To závisí od toho, aká dobrá je odpoveď v porovnaní s inými zdrojmi. Kontroly 2 až 5 opakujte po každej zmene firewallu, CDN, témy alebo CMS, pretože práve takéto zmeny ich potichu rušia.
AISeeWhy vykoná väčšinu týchto kontrol naraz: načíta stránku ako 16 AI a vyhľadávacích crawlerov vedľa skutočného prehliadača, uplatní robots.txt pre každý crawler a prečíta HTML, značkovanie, canonical a dátumy. Bezplatná kontrola ukáže skóre a prvé zistenie; úplná správa uvádza každý problém s pripravenou opravou.
Opravy tohto problému
- OAI-SearchBot je zablokovaný
- Obsah stránky potrebuje JavaScript
- Zoznamy napísané ako obyčajný text
- Sekcie nezačínajú krátkou odpoveďou: 2 z 3
Ďalšie kroky
- robots.txt tester a kontrola pre AI crawlery
- Kontrola a validátor llms.txt
- Pozrite si ukážku úplnej správy
- Monitoring AI crawlerov
- Plány a ceny
Crawlery v tomto článku
Časté otázky
Musím tieto kontroly robiť pri každej stránke?
Kontroly 1 až 5 robte pri každej novej stránke, pretože jednotlivá URL môže byť zablokovaná alebo niesť zabudnutý noindex. Kontroly 6 až 11 závisia hlavne od šablóny, takže ich urobte raz pre každý typ stránky a nové stránky kontrolujte námatkovo.
Prečo nemôžem stránku odoslať do ChatGPT alebo Claude ako do Googlu?
OpenAI, Anthropic ani Perplexity neponúkajú nástroj na odosielanie URL webových stránok. Ich crawlery nachádzajú stránky cez odkazy a vyhľadávanie, takže vo vašich rukách sú interné odkazy, sitemap a otvorený prístup pre OAI-SearchBot, Claude-SearchBot a PerplexityBot.
Moja stránka prejde všetkými dvanástimi kontrolami. Prečo stále nie je citovaná?
Kontroly zabezpečia, že je stránka čitateľná, nie že bude uprednostnená. Asistent vyberá zdroje, ktoré na otázku odpovedajú najlepšie, takže svoju stránku porovnajte s tými, ktoré cituje: či odpovedajú skôr, uvádzajú ceny alebo parametre v texte alebo ponúkajú údaje, ktoré vám chýbajú.
Ako skoro po zverejnení prídu AI crawlery?
Žiadny poskytovateľ nezverejňuje harmonogram. Logy servera ukážu, kedy OAI-SearchBot, Claude-SearchBot alebo PerplexityBot prvýkrát požiadajú o URL; náš návod na kontrolu serverových logov na AI crawlery ukazuje, ako ich nájsť.
Zdroje
- RFC 9309: Robots Exclusion Protocol
- OpenAI: prehľad crawlerov OpenAI
- Anthropic: Prechádza Anthropic údaje z webu a ako môžu majitelia webov crawler zablokovať?
- Perplexity: crawlery Perplexity
- Google Search Central: funkcie AI a váš web
- Google Search Central: metaznačka robots, data-nosnippet a X-Robots-Tag
- Google Search Central: ako určiť kanonickú URL
- Google Search Central: ako ovplyvniť dátumy v podpise
- Google Search Central: vytvorenie a odoslanie sitemapy
- Sitemaps.org: formát XML sitemap
- Google Search Central: ako Googlu oznámiť lokalizované verzie stránky
- Pomocník Google Search Console: nástroj Kontrola webovej adresy
- Bing: IndexNow, začíname
- Pomocník Google Search Console: Test rozšírených výsledkov
- Schema.org: Schema Markup Validator
- Google Search Central: základy SEO pre JavaScript