Səhifəni dərc etməzdən əvvəl aparılmalı 12 AEO yoxlaması (2027)
Dərc etməzdən əvvəl URL-in yönləndirmə olmadan 200 qaytardığını, robots.txt-in hər AI axtarış botuna icazə verdiyini, firewall-un onlara əsl səhifəni təqdim etdiyini və cavabın xam HTML-də olduğunu təsdiqləyin. Sonra unudulmuş noindex və ya nosnippet olmadığını, tək canonical, H1 altında cavab, etibarlı və uyğun JSON-LD, üst-üstə düşən tarixlər, daxili linklərlə sitemap qeydi və hreflang-ı yoxlayın, sonra indeksləmə istəyin.
AI cavablarında heç vaxt görünməyən səhifələrin çoxu darıxdırıcı bir səbəbdən ilişib qalır: unudulmuş noindex, firewall qaydası, staging-i göstərən canonical. Bu on iki yoxlama onları dərcdən əvvəl tutur. Hər biri bir neçə dəqiqə çəkir, çoxu üçün terminal və səhifənin URL-i kifayətdir və onlar botun qarşılaşdığı ardıcıllıqla sadalanıb.
Bu səhifədə
- Hər yoxlama nə qədər vaxt aparır?
- 1. URL yönləndirmə zənciri olmadan 200 qaytarır
- 2. robots.txt səhifəyə hər AI axtarış botu üçün icazə verir
- 3. Firewall AI botlarına əsl səhifəni təqdim edir
- 4. Cavab xam HTML-dədir
- 5. Unudulmuş noindex və ya nosnippet qalmayıb
- 6. Özünü göstərən tək mütləq canonical URL
- 7. Başlıq və H1 səhifənin nəyə cavab verdiyini deyir, cavab isə dərhal altındadır
- 8. JSON-LD səhvsiz oxunur və görünən mətnə uyğundur
- 9. Görünən tarix, işarələmə tarixləri və sitemap lastmod üst-üstə düşür
- 10. Səhifə sitemap-dədir və əlaqəli səhifələrdən link alır
- 11. hreflang qarşılıqlıdır və x-default var
- 12. Axtarış sistemlərindən yeni səhifəni skan etməyi xahiş edin
- Bu yoxlamaları necə seçdik
Hər yoxlama nə qədər vaxt aparır?
Bir səhifə üçün təxmini bələdçi və lazım olan alət. 1-5-ci yoxlamaları hər səhifədə aparın; qalanlarını hər şablon üçün bir dəfə, sonra arabir seçmə yoxlayın.
- 1. Status 200: 1 dəqiqə, curl.
- 2. Hər bot üçün robots.txt: 3 dəqiqə, brauzer və ya curl.
- 3. Firewall cavabı: 3 dəqiqə, curl.
- 4. Xam HTML-də mətn: 2 dəqiqə, curl.
- 5. Unudulmuş noindex və ya nosnippet yoxdur: 2 dəqiqə, curl.
- 6. Tək canonical: 2 dəqiqə, səhifənin mənbə kodu.
- 7. Başlıq, H1 və qısa cavab: 5 dəqiqə, səhifəni oxumaqla.
- 8. Etibarlı və uyğun JSON-LD: 5 dəqiqə, Rich Results Test və ya Schema Markup Validator.
- 9. Tarixlər üst-üstə düşür: 3 dəqiqə, səhifə, işarələmə və sitemap.
- 10. Sitemap və daxili linklər: 5 dəqiqə, sitemap.xml və CMS-iniz.
- 11. hreflang: 5 dəqiqə, yalnız çoxdilli saytlar üçün.
- 12. İndeksləmə sorğusu: 2 dəqiqə, Search Console və IndexNow.
1. URL yönləndirmə zənciri olmadan 200 qaytarır
Bot paylaşacağınız və sitemap-də göstərəcəyiniz dəqiq URL-də səhifənin özünü 200 statusu ilə almalıdır. Hər yönləndirmə uğursuz ola biləcək əlavə addımdır, "tapılmadı" mesajı ilə 200 qaytaran səhifə isə axtarış sistemlərinin çıxara biləcəyi soft 404-dür.
# Final status, number of redirects and final URL
curl -s -o /dev/null -L -w "%{http_code} redirects=%{num_redirects} %{url_effective}\n" https://example.com/new-page/ Uğurlu nəticə: 200 redirects=0 və eyni URL geri qayıdır. Düzəliş: son URL-ə link verin və onu siyahıya salın, köhnə ünvanlardan ən çox bir yönləndirmə saxlayın.
2. robots.txt səhifəyə hər AI axtarış botu üçün icazə verir
robots.txt-i hər botun oxuyacağı kimi oxuyun. Botu adı ilə çəkən qrup onun üçün User-agent: * qrupunu əvəz edir və RFC 9309-a görə ən uzun uyğun qayda qalib gəlir, bərabərlikdə isə Allow qalib gəlir.
Ən azı OAI-SearchBot, Claude-SearchBot, Claude-User, PerplexityBot və Googlebot-u yoxlayın. /guides/ kimi yeni bölmə köhnə Disallow: /g qaydasına ilişə bilər, çünki qaydalar yol prefikslərinə görə uyğunlaşır. robots.txt-in özünün də 200 və ya 404 qaytardığını təsdiqləyin: RFC 9309-a görə server xətası botların bütün saytı qadağan hesab etməli olduğunu bildirir.
Uğurlu nəticə: bu tokenlərin heç biri üçün yolu qadağan edən qayda yoxdur. robots.txt-i necə yoxlamaq haqqında bələdçimiz bir URL-i bir bot üçün necə yoxlamağı göstərir.
3. Firewall AI botlarına əsl səhifəni təqdim edir
Səhifəni brauzer user agent-i və bot user agent-ləri ilə sorğulayın, sonra statusu və ölçünü müqayisə edin. Ada görə filtrləyən bot qoruması yalnız botlara 403, 429 və ya challenge səhifəsi qaytara bilər.
URL=https://example.com/new-page/
for UA in "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36" \
"Mozilla/5.0 (compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot)" \
"Mozilla/5.0 (compatible; Claude-SearchBot)" \
"Mozilla/5.0 (compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot)"; do
curl -s -o /dev/null -w "%{http_code} %{size_download} $UA\n" -A "$UA" "$URL"
done Uğurlu nəticə: hər sətir 200 və oxşar ölçü göstərir. Xeyli kiçik ölçü adətən challenge səhifəsi deməkdir. Bu sətirlər ada görə filtrləyən qaydaları yoxlayır; əsl botlar həm də dərc olunmuş IP diapazonlarından gəlir və öz kompüterinizdən aparılan test bunu təkrarlaya bilməz, buna görə firewall-unuzda bu diapazonlar üçün icazə qaydalarını da yoxlayın.
4. Cavab xam HTML-dədir
Serverin göndərdiyi HTML-də cavabınızdan bir cümlə axtarın. Brauzerin element inspektoru səhifəni skriptlər işlədikdən sonrakı halda göstərir və bu, əksər botların aldığı deyil.
curl -s https://example.com/new-page/ | grep -c "a sentence from your short answer" Uğurlu nəticə: 1 və ya daha çox. 0 mətnin JavaScript ilə əlavə edildiyini göstərir, OpenAI, Anthropic və Perplexity isə botlarının onu işlətdiyini sənədləşdirmir. Mətni serverdə və ya build zamanı render edin; JavaScript məzmunu və AI botları haqqında bələdçimiz variantları sadalayır.
5. Unudulmuş noindex və ya nosnippet qalmayıb
Staging saytlar tez-tez noindex ilə çıxır və şablon onu production-a apara bilər. Həm robots meta teqini, həm də X-Robots-Tag HTTP başlığını yoxlayın, çünki hər ikisi nəzərə alınır.
curl -s -D - -o /tmp/page.html https://example.com/new-page/ | grep -i "x-robots-tag"
grep -i -o '<meta[^>]*name="robots"[^>]*>' /tmp/page.html Uğurlu nəticə: heç nə çıxmır və ya yalnız index, follow və oxşarları. Google bildirir ki, AI Overviews və AI Mode-da görünmək üçün səhifə indekslənmiş və snippet üçün uyğun olmalıdır, nosnippet isə onlar üçün birbaşa giriş kimi istifadəni də bloklayır.
6. Özünü göstərən tək mütləq canonical URL
Səhifə dərc etdiyiniz URL-i göstərən, mütləq URL şəklində düz bir rel="canonical" bəyan etməlidir. Google canonical-ı əmr yox, güclü siqnal adlandırır, nisbi URL-lərə və başqa ünvanı göstərən sitemap kimi ziddiyyətli siqnallara qarşı xəbərdarlıq edir.
Dərc zamanı tez-tez rast gəlinən səhvlər bunlardır: şablon səhifədən köçürülmüş canonical, hələ də staging hostu göstərən canonical və eyni vaxtda mövzudan və plaqindən gələn iki canonical teqi.
Uğurlu nəticə: bir teq, canlı URL, sitemap-dəki ilə eyni protokol və host.
7. Başlıq və H1 səhifənin nəyə cavab verdiyini deyir, cavab isə dərhal altındadır
Səhifənin yuxarı hissəsini yad adam kimi oxuyun. Başlıq və H1 sualı və ya mövzunu alıcıların işlətdiyi sözlərlə adlandırmalı, H1-in altındakı ilk iki-üç cümlə isə ona tam cavab verməlidir.
Axtarış nəticələrində kəsilmə ehtimalı az olsun deyə başlığı təxminən 60 simvolda saxlayın. Qısa cavabı tək sitat gətirildikdə də mənalı olacaq şəkildə, rəqəmlər, ölçü vahidləri və məhsulun adı tam yazılmaqla tərtib edin.
Uğurlu nəticə: yalnız birinci abzası oxuyan adam cavabı alır. AI cavablarında istinad almağın yolları siyahımız sitat üçün yazmağı daha ətraflı əhatə edir.
8. JSON-LD səhvsiz oxunur və görünən mətnə uyğundur
Xarab JSON-LD tamamilə nəzərə alınmır, yəni bir çatışmayan vergül hamısını silir. URL-i Google-un Rich Results Test alətinə və ya Schema Markup Validator-a yapışdırın və hər səhvi düzəldin.
Sonra dəyərləri səhifə ilə müqayisə edin. İşarələmədəki başlıq, tarixlər, qiymət, valyuta və təşkilatın adı oxucunun gördükləri ilə eyni olmalıdır. Google bildirir ki, AI funksiyaları üçün xüsusi işarələmə lazım deyil və strukturlaşdırılmış məlumatlar görünən mətnə uyğun olmalıdır.
Uğurlu nəticə: səhv yoxdur və hər dəyər səhifədə görünür. Ötürün, əgər: səhifə növünə uyğun işarələmə yoxdursa; sadə səhifə yanlış işarələmədən yaxşıdır.
9. Görünən tarix, işarələmə tarixləri və sitemap lastmod üst-üstə düşür
Səhifədə etiketli tarix göstərin, datePublished və dateModified sahələrində eyni tarixlərdən istifadə edin və sitemap-də lastmod-u son əhəmiyyətli dəyişikliyə təyin edin. Google görünən və işarələnmiş tarixlərin üst-üstə düşməsini istəyir və lastmod-dan yalnız o, ardıcıl və yoxlanıla bilən şəkildə dəqiq olduqda istifadə etdiyini bildirir.
Hər build-də bütün URL-lərə bugünkü tarixi vuran sitemap generatoru lastmod-u təkcə yeni səhifə üçün yox, bütün səhifələr üçün yararsız edir.
Uğurlu nəticə: üç yer, bir tarix.
10. Səhifə sitemap-dədir və əlaqəli səhifələrdən link alır
Botlar səhifələri linklər və sitemap-lər vasitəsilə tapır. Yeni URL-i dəqiq canonical URL ilə XML sitemap-inizə əlavə edin və ona ən azı iki əlaqəli səhifədən və bir mərkəzi və ya indeks səhifəsindən link verin.
Bir sitemap faylı 50,000-ə qədər URL və sıxılmamış halda 50 MB saxlaya bilər; daha böyük saytlara sitemap indeksi lazımdır. Google priority və changefreq-i nəzərə almadığını bildirir, buna görə onlara vaxt sərf etməyin. Daxili linki olmayan səhifə botların gec tapa biləcəyi və ya heç tapmaya biləcəyi yetim səhifədir.
Uğurlu nəticə: URL sitemap-dədir və ən azı iki səhifə ona təsviri anchor mətni ilə link verir.
11. hreflang qarşılıqlıdır və x-default var
Səhifə bir neçə dildə mövcuddursa, hər versiya özü də daxil olmaqla bütün versiyaları sadalamalı və hər biri geri link verməlidir. Google digər tərəfdən təsdiqlənməyən hreflang annotasiyalarını nəzərə almır. Heç bir dil uyğun gəlmədikdə göstərilən versiya üçün x-default əlavə edin.
Ötürün, əgər: sayt bir dildədirsə. hreflang x-default haqqında bələdçimiz ona nə vaxt ehtiyac olduğunu izah edir.
12. Axtarış sistemlərindən yeni səhifəni skan etməyi xahiş edin
Səhifə canlı olduqda və yuxarıdakı yoxlamalardan keçdikdə axtarış sistemlərinə xəbər verin. Google Search Console-da yeni URL üçün URL Inspection-dan istifadə edin və Request indexing-i seçin. Bing və IndexNow-u dəstəkləyən digər sistemlər üçün URL-i açarınızla IndexNow endpoint-inə göndərin; Bing bunun skan və ya indeksləməyə zəmanət vermədiyini qeyd edir.
AI assistentlərinin göndərmə forması yoxdur. Onların botları səhifəni linklər və axtarış vasitəsilə tapır, 2, 3 və 10-cu yoxlamaların vacib olmasının səbəbi də budur. llms.txt faylı dərc edirsinizsə, səhifəni oraya da əlavə edin; Google onun Search-in bundan istifadə etmədiyini bildirir, buna görə onu könüllü sayın.
Uğurlu nəticə: URL Inspection canlı səhifənin indekslənə biləcəyini göstərir.
Bu yoxlamaları necə seçdik
Siyahı botun keçdiyi yolu izləyir: URL-ə çatmaq, robots.txt-i oxumaq, firewall-dan keçmək, HTML-i oxumaq, sonra onu şərh etmək. Hər yoxlama OpenAI, Anthropic, Perplexity və Google-un botları haqqında sənədləşdirdiklərinə, robots.txt üçün RFC 9309-a və Google-un canonical, tarix, sitemap və hreflang tövsiyələrinə əsaslanır. Açar söz sıxlığı və ya söz sayı hədəfləri kimi AI cavablarına sənədləşdirilmiş təsiri olmayan yoxlamaları kənarda qoyduq.
Yoxlamalar səhifənin oxuna bildiyini göstərir; ona istinad ediləcəyini göstərə bilmir. Bu, cavabın digər mənbələrlə müqayisədə nə qədər yaxşı olmasından asılıdır. Hər firewall, CDN, mövzu və ya CMS dəyişikliyindən sonra 2-5-ci yoxlamaları təkrarlayın, çünki onları səssizcə pozan məhz bu dəyişikliklərdir.
AISeeWhy bu yoxlamaların çoxunu bir keçiddə aparır: səhifəni əsl brauzerlə yanaşı 16 AI və axtarış botu kimi yükləyir, robots.txt-i hər bot üçün ayrıca tətbiq edir və HTML-i, işarələməni, canonical-ı və tarixləri oxuyur. Pulsuz yoxlama balı və ilk tapıntını göstərir; tam hesabat hər problemi hazır düzəlişlə sadalayır.
Bu problem üçün düzəlişlər
- OAI-SearchBot bloklanıb
- Səhifənin məzmunu JavaScript tələb edir
- Sadə mətn kimi yazılmış siyahılar
- Bölmələr qısa cavabla başlamır: 2 / 3
Növbəti addımlar
- AI botları üçün robots.txt tester və yoxlayıcısı
- llms.txt yoxlayıcısı və validatoru
- Tam hesabat nümunəsinə baxın
- AI botlarının monitorinqi
- Planlar və qiymətlər
Bu məqalədəki botlar
Tez-tez verilən suallar
Bu yoxlamaları hər səhifədə aparmalıyammı?
1-5-ci yoxlamaları hər yeni səhifədə aparın, çünki tək bir URL bloklana və ya unudulmuş noindex daşıya bilər. 6-11-ci yoxlamalar əsasən şablondan asılıdır, buna görə onları hər səhifə növü üçün bir dəfə aparın və yeni səhifələri arabir seçmə yoxlayın.
Niyə səhifəni Google-a göndərdiyim kimi ChatGPT və ya Claude-a göndərə bilmirəm?
OpenAI, Anthropic və Perplexity veb səhifələr üçün URL göndərmə aləti təklif etmir. Onların botları səhifələri linkləri izləməklə və axtarış vasitəsilə tapır, buna görə sizin nəzarət etdiyiniz daxili linklər, sitemap və OAI-SearchBot, Claude-SearchBot və PerplexityBot üçün açıq girişdir.
Səhifəm on iki yoxlamanın hamısından keçir. Niyə hələ də ona istinad edilmir?
Yoxlamalar səhifəni üstünlük verilən yox, oxuna bilən edir. Assistent suala ən yaxşı cavab verən mənbələri seçir, buna görə səhifənizi onun istinad etdiyi səhifələrlə müqayisə edin: daha tez cavab verirlərmi, qiymətləri və ya texniki xüsusiyyətləri mətnlə verirlərmi, sizdə olmayan məlumat təklif edirlərmi.
Dərcdən nə qədər sonra AI botları gəlir?
Heç bir provayder cədvəl dərc etmir. Server loglarınız OAI-SearchBot, Claude-SearchBot və ya PerplexityBot-un URL-i ilk dəfə nə vaxt sorğuladığını göstərir; AI botları üçün server loglarını yoxlamaq haqqında bələdçimiz onları necə tapacağınızı göstərir.
Mənbələr
- RFC 9309: Robots Exclusion Protocol
- OpenAI: OpenAI botlarına ümumi baxış
- Anthropic: Anthropic vebdən məlumat toplayırmı və sayt sahibləri botu necə bloklaya bilər?
- Perplexity: Perplexity botları
- Google Search Central: AI funksiyaları və saytınız
- Google Search Central: Robots meta teqi, data-nosnippet və X-Robots-Tag
- Google Search Central: Canonical URL-i necə göstərmək
- Google Search Central: Dərc tarixlərinə təsir etmək
- Google Search Central: Sitemap yaratmaq və göndərmək
- Sitemaps.org: Sitemap XML formatı
- Google Search Central: Səhifənizin lokallaşdırılmış versiyaları barədə Google-a məlumat vermək
- Google Search Console yardımı: URL Inspection aləti
- Bing: IndexNow, başlanğıc
- Google Search Console yardımı: Rich Results Test
- Schema.org: Schema Markup Validator
- Google Search Central: JavaScript SEO əsasları