12 AEO check na dapat gawin bago mo ilathala ang isang pahina (2027)

Inilathala

Maikling sagot

Bago maglathala, kumpirmahing nagbabalik ng 200 ang URL nang walang redirect, pinapayagan ng robots.txt ang bawat AI search crawler, ibinibigay sa kanila ng firewall mo ang tunay na pahina, at nasa raw HTML ang sagot. Pagkatapos, suriin kung may naiwang noindex o nosnippet, isang canonical, sagot sa ilalim ng H1, valid at tugmang JSON-LD, magkatugmang petsa, entry sa sitemap na may internal link, hreflang, at mag-request ng indexing.

Karamihan sa mga pahinang hindi kailanman lumalabas sa mga sagot ng AI ay pumapalya sa isang bagay na nakakabagot: naiwang noindex, rule sa firewall, canonical na nakaturo sa staging. Nahuhuli ng labindalawang check na ito ang mga iyon bago mag-launch. Ilang minuto lang ang bawat isa, karamihan ay terminal at URL ng pahina lang ang kailangan, at nakalista sila ayon sa pagkakasunod-sunod na nadadaanan ng crawler.

Sa pahinang ito
  1. Gaano katagal ang bawat check?
  2. 1. Nagbabalik ng 200 ang URL nang walang redirect chain
  3. 2. Pinapayagan ng robots.txt ang pahina para sa bawat AI search crawler
  4. 3. Ibinibigay ng firewall sa mga AI crawler ang tunay na pahina
  5. 4. Nasa raw HTML ang sagot
  6. 5. Walang naiwang noindex o nosnippet
  7. 6. Isang canonical URL, absolute at nakaturo sa sarili nito
  8. 7. Sinasabi ng title at H1 kung ano ang sinasagot ng pahina, at nasa ibaba agad ang sagot
  9. 8. Napa-parse ang JSON-LD at tugma ito sa nakikitang text
  10. 9. Magkatugma ang nakikitang petsa, ang petsa sa markup at ang lastmod ng sitemap
  11. 10. Nasa sitemap ang pahina at naka-link mula sa mga kaugnay na pahina
  12. 11. Magkabalikan ang hreflang, at may x-default
  13. 12. Hilingin sa mga search engine na i-crawl ang bagong pahina
  14. Paano namin pinili ang mga check na ito

Gaano katagal ang bawat check?

Tantiyang gabay para sa isang pahina, kasama ang tool na kailangan mo. Gawin ang check 1 hanggang 5 sa bawat pahina; ang iba ay minsan bawat template, saka mag-spot-check.

1. Nagbabalik ng 200 ang URL nang walang redirect chain

Dapat makuha ng crawler ang mismong pahina na may status 200 sa eksaktong URL na ibabahagi mo at ilalagay sa sitemap. Isa pang hakbang na puwedeng pumalya ang bawat redirect, at ang pahinang sumasagot ng 200 na may mensaheng "hindi nahanap" ay soft 404 na puwedeng tanggalin ng mga search engine.

# Final status, number of redirects and final URL
curl -s -o /dev/null -L -w "%{http_code} redirects=%{num_redirects} %{url_effective}\n" https://example.com/new-page/

Pasado: 200 redirects=0 at parehong URL ang bumabalik. Ayusin: i-link at ilista ang huling URL, at hindi hihigit sa isang redirect mula sa mga lumang address.

2. Pinapayagan ng robots.txt ang pahina para sa bawat AI search crawler

Basahin ang robots.txt gaya ng pagbasa ng bawat crawler. Pinapalitan ng grupong nagbabanggit sa isang crawler ang grupong User-agent: * para rito, at sa ilalim ng RFC 9309, ang pinakamahabang tumutugmang rule ang nananalo, at Allow ang nananalo kapag tabla.

Suriin man lang ang OAI-SearchBot, Claude-SearchBot, Claude-User, PerplexityBot at Googlebot. Puwedeng tamaan ng lumang rule na Disallow: /g ang bagong seksyon gaya ng /guides/, dahil tumutugma ang mga rule sa simula ng path. Kumpirmahin din na nagbabalik ng 200 o 404 ang robots.txt mismo: sa ilalim ng RFC 9309, ang server error ay nangangahulugang dapat ipagpalagay ng mga crawler na naka-disallow ang buong site.

Pasado: walang rule para sa alinman sa mga token na ito na nagdi-disallow sa path. Ipinapakita ng gabay namin kung paano i-test ang robots.txt kung paano subukan ang isang URL para sa isang crawler.

3. Ibinibigay ng firewall sa mga AI crawler ang tunay na pahina

I-request ang pahina gamit ang user agent ng browser at ang mga user agent ng crawler, saka ihambing ang status at laki. Puwedeng magbalik ng 403, 429 o challenge page sa mga crawler lang ang bot protection na tumutugma sa pangalan.

URL=https://example.com/new-page/
for UA in "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36" \
          "Mozilla/5.0 (compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot)" \
          "Mozilla/5.0 (compatible; Claude-SearchBot)" \
          "Mozilla/5.0 (compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot)"; do
  curl -s -o /dev/null -w "%{http_code} %{size_download}  $UA\n" -A "$UA" "$URL"
done

Pasado: 200 at magkahawig na laki ang bawat linya. Kadalasang challenge page ang ibig sabihin ng mas maliit nang husto na laki. Sinusubok ng mga string na ito ang mga rule na tumutugma sa pangalan; galing din ang mga tunay na crawler sa mga inilathalang IP range, na hindi kayang gayahin ng test mula sa sarili mong makina, kaya suriin din ang mga allow rule ng firewall mo para sa mga range na iyon.

4. Nasa raw HTML ang sagot

Hanapin sa HTML na ipinapadala ng server ang isang pangungusap mula sa sagot mo. Ipinapakita ng element inspector ng browser ang pahina pagkatapos tumakbo ng mga script, at hindi iyon ang nakukuha ng karamihan ng crawler.

curl -s https://example.com/new-page/ | grep -c "a sentence from your short answer"

Pasado: 1 o higit pa. Ang 0 ay nangangahulugang idinadagdag ng JavaScript ang text, na hindi dinodokumento ng OpenAI, Anthropic at Perplexity na pinapatakbo ng kanilang mga crawler. I-render ito sa server o sa build time; nakalista ang mga opsyon sa gabay namin tungkol sa JavaScript content at mga AI crawler.

5. Walang naiwang noindex o nosnippet

Madalas lumabas ang mga staging site na may noindex, at puwede itong madala ng template sa production. Suriin ang robots meta tag at ang HTTP header na X-Robots-Tag, dahil may bisa ang alinman sa dalawa.

curl -s -D - -o /tmp/page.html https://example.com/new-page/ | grep -i "x-robots-tag"
grep -i -o '<meta[^>]*name="robots"[^>]*>' /tmp/page.html

Pasado: walang na-print, o index, follow lang at katulad nito. Sabi ng Google, dapat naka-index ang pahina at puwedeng magkaroon ng snippet para lumabas sa AI Overviews at AI Mode, at bina-block din ng nosnippet ang paggamit dito bilang direktang input para sa mga iyon.

6. Isang canonical URL, absolute at nakaturo sa sarili nito

Dapat magdeklara ang pahina ng eksaktong isang rel="canonical", bilang absolute URL, na nakaturo sa URL na inilalathala mo. Tinatawag ng Google ang canonical na malakas na signal, hindi utos, at nagbababala ito laban sa mga relative URL at magkasalungat na signal gaya ng sitemap na naglilista ng ibang address.

Karaniwang mali sa launch ang canonical na nakopya mula sa template page, canonical na nakaturo pa rin sa staging host, at dalawang canonical tag nang sabay mula sa theme at plugin.

Pasado: isang tag, ang live na URL, parehong protocol at host gaya ng nasa sitemap.

7. Sinasabi ng title at H1 kung ano ang sinasagot ng pahina, at nasa ibaba agad ang sagot

Basahin ang itaas ng pahina na parang isang estranghero. Dapat banggitin ng title at H1 ang tanong o paksa sa mga salitang ginagamit ng mga mamimili, at dapat itong buong sagutin ng unang dalawa o tatlong pangungusap sa ilalim ng H1.

Panatilihin ang title sa mga 60 character para mas maliit ang tsansang maputol ito sa search results. Isulat ang maikling sagot para may saysay pa rin ito kapag in-quote nang mag-isa, na kumpleto ang mga numero, unit at pangalan ng produkto.

Pasado: may sagot na ang taong unang talata lang ang nabasa. Mas malalim na tinatalakay ng listahan namin ng mga paraan para ma-cite sa mga sagot ng AI ang pagsusulat para ma-quote.

8. Napa-parse ang JSON-LD at tugma ito sa nakikitang text

Binabalewala nang buo ang sirang JSON-LD, kaya natatanggal ang lahat dahil sa isang nawawalang comma. I-paste ang URL sa Rich Results Test ng Google o sa Schema Markup Validator at ayusin ang bawat error.

Pagkatapos, ihambing ang mga value sa pahina. Ang headline, mga petsa, presyo, currency at pangalan ng organisasyon sa markup ay dapat ang mismong nakikita ng mambabasa. Sabi ng Google, walang espesyal na markup na kailangan para sa mga AI feature nito, at dapat tugma ang structured data sa nakikitang text.

Pasado: walang error, at nakikita sa pahina ang bawat value. Laktawan kung: walang angkop na markup ang uri ng pahina; mas mabuti ang simpleng pahina kaysa maling markup.

9. Magkatugma ang nakikitang petsa, ang petsa sa markup at ang lastmod ng sitemap

Magpakita ng may-label na petsa sa pahina, gamitin ang parehong mga petsa sa datePublished at dateModified, at itakda ang lastmod sa sitemap sa huling makabuluhang pagbabago. Hinihiling ng Google na magkatugma ang nakikitang petsa at ang petsa sa markup, at sinasabi nitong ginagamit lang nito ang lastmod kung palagian itong tumpak at napapatunayan.

Ang sitemap generator na nagtatatak sa bawat URL ng petsa ngayong araw sa bawat build ay ginagawang walang silbi ang lastmod para sa lahat ng pahina, hindi lang para sa bago.

Pasado: tatlong lugar, isang petsa.

10. Nasa sitemap ang pahina at naka-link mula sa mga kaugnay na pahina

Nahahanap ng mga crawler ang mga pahina sa pamamagitan ng mga link at sitemap. Idagdag ang bagong URL sa XML sitemap mo, gamit ang eksaktong canonical URL, at i-link ito mula sa kahit dalawang kaugnay na pahina at isang hub o index page.

Kaya ng isang sitemap file ang hanggang 50,000 URL at 50 MB nang hindi naka-compress; kailangan ng sitemap index ng mas malalaking site. Sabi ng Google, binabalewala nito ang priority at changefreq, kaya huwag nang mag-aksaya ng oras sa mga iyon. Ang pahinang walang internal link ay orphan na puwedeng mahanap ng mga crawler nang huli o hindi na talaga.

Pasado: nasa sitemap ang URL at may kahit dalawang pahinang nagli-link dito gamit ang naglalarawang anchor text.

11. Magkabalikan ang hreflang, at may x-default

Kung may bersyon ang pahina sa ilang wika, dapat ilista ng bawat bersyon ang lahat ng bersyon, kasama ang sarili nito, at dapat mag-link pabalik ang bawat isa. Binabalewala ng Google ang mga hreflang annotation na hindi kinukumpirma mula sa kabilang panig. Idagdag ang x-default para sa bersyong ipinapakita kapag walang tumutugmang wika.

Laktawan kung: iisa lang ang wika ng site. Ipinapaliwanag ng gabay namin sa hreflang x-default kung kailan mo ito kailangan.

12. Hilingin sa mga search engine na i-crawl ang bagong pahina

Kapag live na ang pahina at pumasa sa mga check sa itaas, sabihan ang mga search engine. Sa Google Search Console, gamitin ang URL Inspection sa bagong URL at piliin ang Request indexing. Para sa Bing at iba pang engine na sumusuporta sa IndexNow, isumite ang URL sa IndexNow endpoint gamit ang key mo; ayon sa Bing, hindi nito ginagarantiya ang pag-crawl o pag-index.

Walang submission form ang mga AI assistant. Nahahanap ng kanilang mga crawler ang pahina sa pamamagitan ng mga link at search, kaya mahalaga ang check 2, 3 at 10. Kung naglalathala ka ng llms.txt file, idagdag din doon ang pahina; sabi ng Google, hindi ito ginagamit ng Search nito, kaya ituring itong opsyonal.

Pasado: ipinapakita ng URL Inspection na puwedeng ma-index ang live na pahina.

Paano namin pinili ang mga check na ito

Sinusundan ng listahan ang dinadaanan ng crawler: abutin ang URL, basahin ang robots.txt, lampasan ang firewall, basahin ang HTML, saka ito unawain. Nakabatay ang bawat check sa dinodokumento ng OpenAI, Anthropic, Perplexity at Google tungkol sa kanilang mga crawler, sa RFC 9309 para sa robots.txt, at sa gabay ng Google para sa canonical, petsa, sitemap at hreflang. Hindi namin isinama ang mga check na walang dokumentadong epekto sa mga sagot ng AI, gaya ng keyword density o target na bilang ng salita.

Ipinapakita ng mga check na nababasa ang isang pahina; hindi nila maipapakita na mai-cite ito. Nakadepende iyon sa kung gaano kahusay ang sagot kumpara sa ibang source. Ulitin ang check 2 hanggang 5 pagkatapos ng bawat pagbabago sa firewall, CDN, theme o CMS, dahil iyon ang mga pagbabagong tahimik na sumisira sa mga ito.

Pinapatakbo ng AISeeWhy ang karamihan ng mga check na ito nang sabay-sabay: kinukuha nito ang pahina bilang 16 na AI at search crawler katabi ng tunay na browser, ina-apply ang robots.txt bawat crawler at binabasa ang HTML, markup, canonical at mga petsa. Ipinapakita ng libreng check ang score at ang unang finding; inililista ng buong report ang bawat problema kasama ang handang ayos.

Mga ayos para sa problemang ito

Mga libreng tool

Mga susunod na hakbang

Mga crawler sa artikulong ito

Mga madalas itanong

Kailangan ko bang gawin ang mga check na ito sa bawat pahina?

Gawin ang check 1 hanggang 5 sa bawat bagong pahina, dahil puwedeng ma-block ang isang URL o magdala ng naiwang noindex. Karamihan ay nakadepende sa template ang check 6 hanggang 11, kaya gawin ang mga ito minsan bawat uri ng pahina at mag-spot-check ng mga bagong pahina.

Bakit hindi ako makapagsumite ng pahina sa ChatGPT o Claude gaya ng sa Google?

Walang URL submission tool para sa mga web page ang OpenAI, Anthropic at Perplexity. Nahahanap ng kanilang mga crawler ang mga pahina sa pagsunod sa mga link at sa pamamagitan ng search, kaya ang internal link, sitemap at bukas na access para sa OAI-SearchBot, Claude-SearchBot at PerplexityBot ang hawak mo.

Pumapasa ang pahina ko sa lahat ng labindalawang check. Bakit hindi pa rin ito nai-cite?

Ginagawang nababasa ng mga check ang pahina, hindi pinipili. Pinipili ng assistant ang mga source na pinakamahusay sumagot sa isang tanong, kaya ihambing ang pahina mo sa mga pahinang talagang sini-cite nito: kung mas maaga silang sumasagot, isinusulat ang presyo o specs bilang text, o may data na wala sa iyo.

Gaano kabilis bumibisita ang mga AI crawler pagkatapos maglathala?

Walang vendor na naglalathala ng iskedyul. Ipinapakita ng mga server log mo kung kailan unang ni-request ng OAI-SearchBot, Claude-SearchBot o PerplexityBot ang URL; ipinapakita ng gabay namin sa pagsuri ng server log para sa mga AI crawler kung paano sila hanapin.

Mga pinagmulan

Iba pang artikulo