12 AEO-sjekker du bør gjøre før du publiserer en side (2027)

Publisert

Kort svar

Bekreft før publisering at URL-en svarer 200 uten omdirigeringer, at robots.txt tillater hver AI-søkecrawler, at brannmuren gir dem den ekte siden, og at svaret ligger i den rå HTML-en. Sjekk deretter for glemt noindex eller nosnippet, én canonical, et svar under H1, gyldig JSON-LD som stemmer, samsvarende datoer, en oppføring i sitemap med interne lenker, hreflang, og be om indeksering.

De fleste sider som aldri dukker opp i AI-svar, feiler på noe kjedelig: en glemt noindex, en brannmurregel, en canonical som peker mot staging. Disse tolv sjekkene fanger slikt før lansering. Hver av dem tar noen minutter, de fleste krever bare en terminal og URL-en til siden, og de står i den rekkefølgen en crawler møter dem.

På denne siden
  1. Hvor lang tid tar hver sjekk?
  2. 1. URL-en svarer 200 uten en kjede av omdirigeringer
  3. 2. robots.txt tillater siden for hver AI-søkecrawler
  4. 3. Brannmuren gir AI-crawlere den ekte siden
  5. 4. Svaret ligger i den rå HTML-en
  6. 5. Ingen noindex eller nosnippet er blitt liggende igjen
  7. 6. Én kanonisk URL, absolutt og med henvisning til seg selv
  8. 7. Tittelen og H1 sier hva siden svarer på, med svaret rett under
  9. 8. JSON-LD kan tolkes og stemmer med den synlige teksten
  10. 9. Synlig dato, datoer i markupen og lastmod i sitemap stemmer overens
  11. 10. Siden står i sitemap og lenkes fra relaterte sider
  12. 11. hreflang er gjensidig, med x-default
  13. 12. Be søkemotorene om å crawle den nye siden
  14. Slik valgte vi disse sjekkene

Hvor lang tid tar hver sjekk?

En grov veiledning for én side, med verktøyet du trenger. Kjør sjekk 1 til 5 på hver side; resten én gang per mal, og deretter stikkprøver.

1. URL-en svarer 200 uten en kjede av omdirigeringer

En crawler skal få selve siden med status 200 på nøyaktig den URL-en du deler og oppgir i sitemap. Hver omdirigering er enda et trinn som kan feile, og en side som svarer 200 med en melding om at siden ikke finnes, er en myk 404 som søkemotorer kan droppe.

# Final status, number of redirects and final URL
curl -s -o /dev/null -L -w "%{http_code} redirects=%{num_redirects} %{url_effective}\n" https://example.com/new-page/

Bestått: 200 redirects=0 og den samme URL-en tilbake. Rett: lenk til og oppgi den endelige URL-en, og ha maks én omdirigering fra gamle adresser.

2. robots.txt tillater siden for hver AI-søkecrawler

Les robots.txt slik hver crawler ville gjort. En gruppe som nevner en crawler ved navn, erstatter gruppen User-agent: * for den, og etter RFC 9309 vinner den lengste samsvarende regelen, der Allow vinner ved likhet.

Sjekk minst OAI-SearchBot, Claude-SearchBot, Claude-User, PerplexityBot og Googlebot. En ny seksjon som /guides/ kan bli fanget av en gammel regel Disallow: /g, fordi regler matcher begynnelsen av stien. Bekreft også at robots.txt selv svarer 200 eller 404: etter RFC 9309 skal crawlere ved en serverfeil anta at hele nettstedet er forbudt.

Bestått: ingen regel for noen av disse tokenene forbyr stien. Guiden vår om hvordan du tester robots.txt, viser hvordan du tester én URL for én crawler.

3. Brannmuren gir AI-crawlere den ekte siden

Be om siden med en nettlesers user agent og med crawleres user agents, og sammenlign status og størrelse. Botbeskyttelse som matcher på navnet, kan gi 403, 429 eller en utfordringsside bare til crawlere.

URL=https://example.com/new-page/
for UA in "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36" \
          "Mozilla/5.0 (compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot)" \
          "Mozilla/5.0 (compatible; Claude-SearchBot)" \
          "Mozilla/5.0 (compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot)"; do
  curl -s -o /dev/null -w "%{http_code} %{size_download}  $UA\n" -A "$UA" "$URL"
done

Bestått: hver linje viser 200 og en lignende størrelse. En mye mindre størrelse betyr som regel en utfordringsside. Disse strengene tester regler som matcher på navnet; ekte crawlere kommer også fra publiserte IP-områder, noe en test fra din egen maskin ikke kan gjenskape, så sjekk også brannmurens tillatelsesregler for de områdene.

4. Svaret ligger i den rå HTML-en

Søk i HTML-en serveren sender, etter en setning fra svaret ditt. Elementinspektøren i nettleseren viser siden etter at skriptene har kjørt, og det er ikke det de fleste crawlere får.

curl -s https://example.com/new-page/ | grep -c "a sentence from your short answer"

Bestått: 1 eller mer. En 0 betyr at teksten legges til med JavaScript, og OpenAI, Anthropic og Perplexity dokumenterer ikke at crawlerne deres kjører det. Rendre den på serveren eller ved bygging; guiden vår om JavaScript-innhold og AI-crawlere viser alternativene.

5. Ingen noindex eller nosnippet er blitt liggende igjen

Staging-nettsteder leveres ofte med noindex, og en mal kan ta den med til produksjon. Sjekk både robots-metataggen og HTTP-headeren X-Robots-Tag, fordi begge teller.

curl -s -D - -o /tmp/page.html https://example.com/new-page/ | grep -i "x-robots-tag"
grep -i -o '<meta[^>]*name="robots"[^>]*>' /tmp/page.html

Bestått: ingenting skrives ut, eller bare index, follow og lignende. Google sier at en side må være indeksert og kvalifisert for utdrag for å vises i AI Overviews og AI Mode, og at nosnippet også blokkerer bruk som direkte inndata for dem.

6. Én kanonisk URL, absolutt og med henvisning til seg selv

Siden skal oppgi nøyaktig én rel="canonical", som absolutt URL, som peker på URL-en du publiserer. Google kaller canonical et sterkt signal og ikke en kommando, og advarer mot relative URL-er og mot motstridende signaler, for eksempel et sitemap som oppgir en annen adresse.

Vanlige feil ved lansering er en canonical som er kopiert fra en malside, en som fortsatt peker mot en staging-vert, og to canonical-tagger samtidig fra et tema og en utvidelse.

Bestått: én tagg, den publiserte URL-en, samme protokoll og vert som i sitemap.

7. Tittelen og H1 sier hva siden svarer på, med svaret rett under

Les toppen av siden slik en fremmed ville gjort. Tittelen og H1 skal nevne spørsmålet eller emnet med ordene kjøpere bruker, og de to eller tre første setningene under H1 skal svare fullt ut på det.

Hold tittelen på rundt 60 tegn, så er det mindre sannsynlig at den blir avkortet i søkeresultatene. Skriv det korte svaret slik at det fortsatt gir mening når det siteres alene, med tall, enheter og produktnavn skrevet helt ut.

Bestått: den som bare leser første avsnitt, har svaret. Listen vår over måter å bli sitert i AI-svar på, går grundigere inn på å skrive for sitater.

8. JSON-LD kan tolkes og stemmer med den synlige teksten

Ødelagt JSON-LD ignoreres i sin helhet, så ett manglende komma fjerner alt. Lim inn URL-en i Googles Test av rike resultater eller i Schema Markup Validator, og rett hver feil.

Sammenlign deretter verdiene med siden. Overskrift, datoer, pris, valuta og organisasjonsnavn i markupen skal være de samme som en leser ser. Google sier at det ikke trengs noen spesiell markup for AI-funksjonene, og at strukturerte data skal stemme med den synlige teksten.

Bestått: ingen feil, og hver verdi er synlig på siden. Hopp over hvis: sidetypen ikke har passende markup; en vanlig side er bedre enn feil markup.

9. Synlig dato, datoer i markupen og lastmod i sitemap stemmer overens

Vis en dato med etikett på siden, bruk de samme datoene i datePublished og dateModified, og sett lastmod i sitemap til den siste vesentlige endringen. Google ber om at synlige og markerte datoer stemmer overens, og sier at lastmod bare brukes hvis den er konsekvent og etterprøvbart riktig.

En sitemapgenerator som stempler hver URL med dagens dato ved hver bygging, gjør lastmod verdiløs for alle sider, ikke bare den nye.

Bestått: tre steder, én dato.

10. Siden står i sitemap og lenkes fra relaterte sider

Crawlere finner sider via lenker og sitemaps. Legg den nye URL-en til i XML-sitemapen din, med nøyaktig den kanoniske URL-en, og lenk til den fra minst to relaterte sider og en oversikts- eller indeksside.

En sitemapfil kan inneholde opptil 50 000 URL-er og 50 MB ukomprimert; større nettsteder trenger en sitemapindeks. Google sier at priority og changefreq ignoreres, så ikke bruk tid på dem. En side uten interne lenker er foreldreløs, og crawlere kan finne den sent eller ikke i det hele tatt.

Bestått: URL-en står i sitemap, og minst to sider lenker til den med beskrivende lenketekst.

11. hreflang er gjensidig, med x-default

Hvis siden finnes på flere språk, skal hver versjon oppgi alle versjonene, også seg selv, og hver versjon må lenke tilbake. Google ignorerer hreflang-merknader som ikke bekreftes fra den andre siden. Legg til x-default for versjonen som vises når ingen språk passer.

Hopp over hvis: nettstedet har ett språk. Guiden vår om hreflang x-default forklarer når du trenger det.

12. Be søkemotorene om å crawle den nye siden

Når siden er publisert og består sjekkene over, forteller du søkemotorene om den. I Google Search Console bruker du Inspeksjon av nettadresser på den nye URL-en og velger Be om indeksering. For Bing og andre søkemotorer som støtter IndexNow, sender du URL-en til IndexNow-endepunktet med nøkkelen din; Bing påpeker at dette ikke garanterer crawling eller indeksering.

AI-assistenter har ikke noe skjema for å sende inn sider. Crawlerne deres finner siden via lenker og søk, og derfor betyr sjekk 2, 3 og 10 noe. Hvis du publiserer en llms.txt-fil, legger du til siden der også; Google sier at Search ikke bruker den, så regn den som valgfri.

Bestått: Inspeksjon av nettadresser viser at den publiserte siden kan indekseres.

Slik valgte vi disse sjekkene

Listen følger veien en crawler tar: nå URL-en, lese robots.txt, komme forbi brannmuren, lese HTML-en og så tolke den. Hver sjekk bygger på det OpenAI, Anthropic, Perplexity og Google dokumenterer om crawlerne sine, på RFC 9309 for robots.txt og på Googles retningslinjer for canonicals, datoer, sitemaps og hreflang. Vi utelot sjekker uten dokumentert effekt på AI-svar, som søkeordtetthet eller mål for antall ord.

Sjekkene viser at en side kan leses; de kan ikke vise at den vil bli sitert. Det avhenger av hvor godt svaret er sammenlignet med andre kilder. Gjenta sjekk 2 til 5 etter hver endring av brannmur, CDN, tema eller CMS, fordi det er nettopp de endringene som i det stille gjør dem ugyldige.

AISeeWhy kjører de fleste av disse sjekkene i én omgang: verktøyet henter siden som 16 AI- og søkecrawlere ved siden av en ekte nettleser, bruker robots.txt per crawler og leser HTML, markup, canonical og datoer. Den gratis sjekken viser poengsummen og det første funnet; den fullstendige rapporten viser hvert problem med en ferdig løsning.

Rettelser for dette problemet

Gratis verktøy

Neste steg

Crawlere i denne artikkelen

Vanlige spørsmål

Må jeg kjøre disse sjekkene på hver side?

Kjør sjekk 1 til 5 på hver nye side, fordi én enkelt URL kan være blokkert eller ha en glemt noindex. Sjekk 6 til 11 avhenger mest av malen, så kjør dem én gang per sidetype og ta stikkprøver av nye sider.

Hvorfor kan jeg ikke sende inn en side til ChatGPT eller Claude slik jeg kan til Google?

OpenAI, Anthropic og Perplexity tilbyr ikke noe verktøy for å sende inn URL-er til nettsider. Crawlerne deres finner sider ved å følge lenker og via søk, så interne lenker, et sitemap og fri tilgang for OAI-SearchBot, Claude-SearchBot og PerplexityBot er det du har kontroll over.

Siden min består alle tolv sjekkene. Hvorfor blir den fortsatt ikke sitert?

Sjekkene gjør en side lesbar, ikke foretrukket. En assistent velger kildene som svarer best på et spørsmål, så sammenlign siden din med sidene den faktisk siterer: om de svarer tidligere, oppgir priser eller spesifikasjoner i tekst eller har data som siden din mangler.

Hvor fort etter publisering kommer AI-crawlere innom?

Ingen leverandør publiserer en tidsplan. Serverloggene dine viser når OAI-SearchBot, Claude-SearchBot eller PerplexityBot første gang ber om URL-en; guiden vår om å sjekke serverlogger for AI-crawlere viser hvordan du finner dem.

Kilder

Flere artikler