પેજ પ્રકાશિત કરતાં પહેલાં કરવાની 12 AEO તપાસ (2027)

પ્રકાશિત

ટૂંકો જવાબ

પ્રકાશિત કરતાં પહેલાં ખાતરી કરો કે URL રીડાયરેક્ટ વિના 200 આપે છે, robots.txt દરેક AI સર્ચ ક્રૉલરને મંજૂરી આપે છે, તમારી ફાયરવૉલ તેમને અસલ પેજ આપે છે, અને જવાબ કાચા HTMLમાં છે. પછી તપાસો કે કોઈ રહી ગયેલું noindex કે nosnippet નથી, એક જ canonical છે, H1 નીચે જવાબ છે, JSON-LD માન્ય અને મેળ ખાતું છે, તારીખો મળે છે, sitemap એન્ટ્રી અને આંતરિક લિંક છે, hreflang છે, અને ઇન્ડેક્સિંગની વિનંતી કરો.

AI જવાબોમાં ક્યારેય ન દેખાતાં મોટા ભાગનાં પેજ કોઈ સામાન્ય બાબતમાં અટકે છે: રહી ગયેલું noindex, કોઈ ફાયરવૉલ નિયમ, સ્ટેજિંગ તરફ નિર્દેશ કરતું canonical. આ બાર તપાસ લૉન્ચ પહેલાં તેને પકડી લે છે. દરેકમાં થોડી મિનિટો લાગે છે, મોટા ભાગની માટે ટર્મિનલ અને પેજના URL સિવાય કંઈ જોઈતું નથી, અને ક્રૉલર જે ક્રમમાં તેનો સામનો કરે છે તે ક્રમમાં તે આપેલી છે.

આ પેજ પર
  1. દરેક તપાસમાં કેટલો સમય લાગે છે?
  2. 1. URL રીડાયરેક્ટ ચેન વિના 200 આપે છે
  3. 2. robots.txt દરેક AI સર્ચ ક્રૉલર માટે પેજને મંજૂરી આપે છે
  4. 3. ફાયરવૉલ AI ક્રૉલરને અસલ પેજ આપે છે
  5. 4. જવાબ કાચા HTMLમાં છે
  6. 5. કોઈ noindex કે nosnippet રહી ગયું નથી
  7. 6. એક canonical URL, પૂરું અને પોતાની તરફ નિર્દેશ કરતું
  8. 7. ટાઇટલ અને H1 કહે છે કે પેજ શેનો જવાબ આપે છે, અને જવાબ બરાબર નીચે છે
  9. 8. JSON-LD પાર્સ થાય છે અને દેખાતા લખાણ સાથે મેળ ખાય છે
  10. 9. દેખાતી તારીખ, માર્કઅપની તારીખો અને sitemapનું lastmod મળે છે
  11. 10. પેજ sitemapમાં છે અને સંબંધિત પેજ પરથી લિંક કરેલું છે
  12. 11. hreflang બંને તરફથી છે, x-default સાથે
  13. 12. સર્ચ એન્જિનને નવું પેજ ક્રૉલ કરવા કહો
  14. અમે આ તપાસ કેવી રીતે પસંદ કરી

દરેક તપાસમાં કેટલો સમય લાગે છે?

એક પેજ માટે અંદાજિત માર્ગદર્શન, જરૂરી ટૂલ સાથે. તપાસ 1થી 5 દરેક પેજ પર ચલાવો; બાકીની દરેક ટેમ્પલેટ માટે એક વાર, પછી વચ્ચે વચ્ચે તપાસો.

1. URL રીડાયરેક્ટ ચેન વિના 200 આપે છે

તમે જે URL શેર કરશો અને sitemapમાં મૂકશો, બરાબર એ જ URL પર ક્રૉલરને સ્ટેટસ 200 સાથે પેજ પોતે મળવું જોઈએ. દરેક રીડાયરેક્ટ નિષ્ફળ જઈ શકે તેવું એક વધુ પગલું છે, અને "મળ્યું નહીં" સંદેશ સાથે 200 આપતું પેજ soft 404 છે, જેને સર્ચ એન્જિન કાઢી શકે છે.

# Final status, number of redirects and final URL
curl -s -o /dev/null -L -w "%{http_code} redirects=%{num_redirects} %{url_effective}\n" https://example.com/new-page/

પાસ: 200 redirects=0 અને એ જ URL પાછું. સુધારો: અંતિમ URLની લિંક આપો અને તેને જ યાદીમાં રાખો, અને જૂનાં સરનામાંથી વધુમાં વધુ એક રીડાયરેક્ટ રાખો.

2. robots.txt દરેક AI સર્ચ ક્રૉલર માટે પેજને મંજૂરી આપે છે

દરેક ક્રૉલર વાંચે તે રીતે robots.txt વાંચો. જે જૂથ કોઈ ક્રૉલરનું નામ લે છે તે તેના માટે User-agent: * જૂથનું સ્થાન લે છે, અને RFC 9309 મુજબ સૌથી લાંબો મેળ ખાતો નિયમ જીતે છે, બરાબરી થાય તો Allow જીતે છે.

ઓછામાં ઓછા OAI-SearchBot, Claude-SearchBot, Claude-User, PerplexityBot અને Googlebot તપાસો. /guides/ જેવો નવો વિભાગ જૂના Disallow: /g નિયમમાં ફસાઈ શકે છે, કારણ કે નિયમો પાથના શરૂઆતના ભાગ સાથે મેળ ખાય છે. એ પણ ખાતરી કરો કે robots.txt પોતે 200 કે 404 આપે છે: RFC 9309 મુજબ સર્વર એરરનો અર્થ એ છે કે ક્રૉલરે આખી સાઇટ disallow માનવી જોઈએ.

પાસ: આ ટોકનમાંથી કોઈનો નિયમ પાથને disallow કરતો નથી. robots.txt કેવી રીતે ટેસ્ટ કરવું તે પરની અમારી ગાઇડ બતાવે છે કે એક ક્રૉલર માટે એક URL કેવી રીતે તપાસવું.

3. ફાયરવૉલ AI ક્રૉલરને અસલ પેજ આપે છે

પેજને બ્રાઉઝર યુઝર એજન્ટથી અને ક્રૉલર યુઝર એજન્ટથી માગો, પછી સ્ટેટસ અને સાઇઝની તુલના કરો. નામ પરથી મેળ કરતી બૉટ સુરક્ષા ફક્ત ક્રૉલરને 403, 429 કે ચૅલેન્જ પેજ આપી શકે છે.

URL=https://example.com/new-page/
for UA in "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36" \
          "Mozilla/5.0 (compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot)" \
          "Mozilla/5.0 (compatible; Claude-SearchBot)" \
          "Mozilla/5.0 (compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot)"; do
  curl -s -o /dev/null -w "%{http_code} %{size_download}  $UA\n" -A "$UA" "$URL"
done

પાસ: દરેક લીટીમાં 200 અને લગભગ સરખી સાઇઝ. ઘણી નાની સાઇઝ સામાન્ય રીતે ચૅલેન્જ પેજનો સંકેત છે. આ સ્ટ્રિંગ નામ પરથી મેળ કરતા નિયમો તપાસે છે; અસલ ક્રૉલર પ્રકાશિત IP રેન્જમાંથી પણ આવે છે, જે તમારા પોતાના મશીન પરનો ટેસ્ટ ફરી ઊભું કરી શકતો નથી, તેથી એ રેન્જ માટે તમારી ફાયરવૉલના allow નિયમો પણ તપાસો.

4. જવાબ કાચા HTMLમાં છે

સર્વર મોકલે છે તે HTMLમાં તમારા જવાબનું કોઈ વાક્ય શોધો. બ્રાઉઝરનું એલિમેન્ટ ઇન્સ્પેક્ટર સ્ક્રિપ્ટ ચાલ્યા પછીનું પેજ બતાવે છે, જે મોટા ભાગના ક્રૉલરને મળતું નથી.

curl -s https://example.com/new-page/ | grep -c "a sentence from your short answer"

પાસ: 1 કે વધુ. 0નો અર્થ છે કે લખાણ JavaScriptથી ઉમેરાય છે, અને OpenAI, Anthropic અને Perplexity દસ્તાવેજ કરતા નથી કે તેમના ક્રૉલર તે ચલાવે છે. તેને સર્વર પર કે બિલ્ડ વખતે રેન્ડર કરો; JavaScript કન્ટેન્ટ અને AI ક્રૉલર પરની અમારી ગાઇડ વિકલ્પો આપે છે.

5. કોઈ noindex કે nosnippet રહી ગયું નથી

સ્ટેજિંગ સાઇટો ઘણી વાર noindex સાથે આવે છે, અને કોઈ ટેમ્પલેટ તેને પ્રોડક્શન સુધી લઈ જઈ શકે છે. robots meta tag અને X-Robots-Tag HTTP હેડર બંને તપાસો, કારણ કે બેમાંથી કોઈ પણ લાગુ પડે છે.

curl -s -D - -o /tmp/page.html https://example.com/new-page/ | grep -i "x-robots-tag"
grep -i -o '<meta[^>]*name="robots"[^>]*>' /tmp/page.html

પાસ: કંઈ પ્રિન્ટ ન થાય, અથવા ફક્ત index, follow અને તેના જેવું. Google કહે છે કે AI Overviews અને AI Modeમાં દેખાવા માટે પેજ ઇન્ડેક્સ થયેલું અને snippet માટે પાત્ર હોવું જોઈએ, અને nosnippet તેમના સીધા ઇનપુટ તરીકેનો ઉપયોગ પણ રોકે છે.

6. એક canonical URL, પૂરું અને પોતાની તરફ નિર્દેશ કરતું

પેજે બરાબર એક rel="canonical" જાહેર કરવું જોઈએ, પૂરા URL તરીકે, જે તમે પ્રકાશિત કરો છો તે URL તરફ નિર્દેશ કરે. Google canonicalને મજબૂત સંકેત કહે છે, આદેશ નહીં, અને relative URL સામે અને વિરોધાભાસી સંકેતો સામે ચેતવે છે, જેમ કે બીજું સરનામું ધરાવતો sitemap.

લૉન્ચની સામાન્ય ભૂલો છે: ટેમ્પલેટ પેજમાંથી કૉપી થયેલું canonical, હજી સ્ટેજિંગ હોસ્ટ તરફ નિર્દેશ કરતું canonical, અને થીમ અને પ્લગઇનમાંથી એકસાથે આવેલા બે canonical ટૅગ.

પાસ: એક ટૅગ, લાઇવ URL, sitemapમાં છે એ જ પ્રોટોકૉલ અને હોસ્ટ.

7. ટાઇટલ અને H1 કહે છે કે પેજ શેનો જવાબ આપે છે, અને જવાબ બરાબર નીચે છે

પેજનો ઉપરનો ભાગ કોઈ અજાણી વ્યક્તિની જેમ વાંચો. ટાઇટલ અને H1એ પ્રશ્ન કે વિષય ખરીદનારના શબ્દોમાં કહેવો જોઈએ, અને H1 નીચેનાં પહેલાં બે કે ત્રણ વાક્યોએ તેનો પૂરો જવાબ આપવો જોઈએ.

ટાઇટલ લગભગ 60 અક્ષર સુધી રાખો, જેથી સર્ચ પરિણામોમાં તે કપાઈ જવાની શક્યતા ઓછી રહે. ટૂંકો જવાબ એવી રીતે લખો કે એકલો ટાંકવામાં આવે તો પણ અર્થપૂર્ણ રહે, સંખ્યાઓ, એકમો અને પ્રોડક્ટનું નામ પૂરું લખીને.

પાસ: જે ફક્ત પહેલો ફકરો વાંચે તેને જવાબ મળી જાય. AI જવાબોમાં ટાંકવામાં આવવાની રીતોની અમારી યાદી ટાંકણ માટે લખવા વિશે વધુ ઊંડાણથી સમજાવે છે.

8. JSON-LD પાર્સ થાય છે અને દેખાતા લખાણ સાથે મેળ ખાય છે

તૂટેલું JSON-LD આખેઆખું અવગણાય છે, તેથી એક અલ્પવિરામ રહી જાય તો બધું જાય. URLને Googleના Rich Results Test કે Schema Markup Validatorમાં મૂકો અને દરેક એરર સુધારો.

પછી મૂલ્યોની પેજ સાથે તુલના કરો. માર્કઅપમાં હેડલાઇન, તારીખો, કિંમત, ચલણ અને સંસ્થાનું નામ વાચક જુએ છે તે જ હોવાં જોઈએ. Google કહે છે કે તેની AI સુવિધાઓ માટે કોઈ ખાસ માર્કઅપની જરૂર નથી, અને સ્ટ્રક્ચર્ડ ડેટા દેખાતા લખાણ સાથે મેળ ખાવો જોઈએ.

પાસ: કોઈ એરર નહીં, અને દરેક મૂલ્ય પેજ પર દેખાય છે. ક્યારે છોડો: એ પેજ પ્રકાર માટે યોગ્ય માર્કઅપ નથી; ખોટા માર્કઅપ કરતાં સાદું પેજ સારું.

9. દેખાતી તારીખ, માર્કઅપની તારીખો અને sitemapનું lastmod મળે છે

પેજ પર લેબલવાળી તારીખ બતાવો, datePublished અને dateModifiedમાં એ જ તારીખો વાપરો, અને sitemapનું lastmod છેલ્લા મહત્ત્વના ફેરફાર પર સેટ કરો. Google ઇચ્છે છે કે દેખાતી અને માર્કઅપની તારીખો મેળ ખાય, અને કહે છે કે તે lastmod ત્યારે જ વાપરે છે જ્યારે તે સતત અને ચકાસી શકાય તે રીતે સાચું હોય.

દરેક બિલ્ડ પર દરેક URLને આજની તારીખ લગાડતું sitemap જનરેટર ફક્ત નવા પેજ માટે નહીં, બધાં પેજ માટે lastmod નકામું બનાવે છે.

પાસ: ત્રણ જગ્યા, એક તારીખ.

10. પેજ sitemapમાં છે અને સંબંધિત પેજ પરથી લિંક કરેલું છે

ક્રૉલર લિંક અને sitemap દ્વારા પેજ શોધે છે. નવું URL તમારા XML sitemapમાં બરાબર canonical URL સાથે ઉમેરો, અને ઓછામાં ઓછાં બે સંબંધિત પેજ અને એક હબ કે ઇન્ડેક્સ પેજ પરથી તેની લિંક આપો.

એક sitemap ફાઇલમાં 50,000 સુધી URL અને કમ્પ્રેશન વિના 50 MB સુધી સમાઈ શકે છે; મોટી સાઇટોને sitemap ઇન્ડેક્સ જોઈએ. Google કહે છે કે તે priority અને changefreqને અવગણે છે, તેથી તેના પર સમય ન બગાડો. આંતરિક લિંક વિનાનું પેજ અનાથ પેજ છે, જે ક્રૉલરને મોડું મળી શકે અથવા બિલકુલ ન મળે.

પાસ: URL sitemapમાં છે અને ઓછામાં ઓછાં બે પેજ વર્ણનાત્મક ઍન્કર લખાણ સાથે તેની લિંક આપે છે.

11. hreflang બંને તરફથી છે, x-default સાથે

જો પેજ અનેક ભાષાઓમાં હોય, તો દરેક વર્ઝને પોતાના સહિત બધાં વર્ઝનની યાદી આપવી જોઈએ, અને દરેકે પાછી લિંક આપવી જોઈએ. બીજી તરફથી પુષ્ટિ ન થયેલાં hreflang એનોટેશનને Google અવગણે છે. કોઈ ભાષા મેળ ન ખાય ત્યારે બતાવાતા વર્ઝન માટે x-default ઉમેરો.

ક્યારે છોડો: સાઇટ એક જ ભાષામાં છે. hreflang x-default પરની અમારી ગાઇડ સમજાવે છે કે તેની જરૂર ક્યારે પડે છે.

12. સર્ચ એન્જિનને નવું પેજ ક્રૉલ કરવા કહો

પેજ લાઇવ થાય અને ઉપરની તપાસ પાસ કરે, પછી સર્ચ એન્જિનને તેના વિશે જણાવો. Google Search Consoleમાં નવા URL પર URL નિરીક્ષણ ચલાવો અને ઇન્ડેક્સિંગની વિનંતી કરો પસંદ કરો. Bing અને IndexNowને સપોર્ટ કરતાં બીજાં એન્જિન માટે, તમારી key સાથે URLને IndexNow એન્ડપૉઇન્ટ પર સબમિટ કરો; Bing નોંધે છે કે આનાથી ક્રૉલિંગ કે ઇન્ડેક્સિંગની ખાતરી મળતી નથી.

AI આસિસ્ટન્ટ પાસે કોઈ સબમિશન ફૉર્મ નથી. તેમના ક્રૉલર લિંક અને સર્ચ દ્વારા પેજ શોધે છે, તેથી જ તપાસ 2, 3 અને 10 મહત્ત્વની છે. જો તમે llms.txt ફાઇલ પ્રકાશિત કરો, તો પેજ ત્યાં પણ ઉમેરો; Google કહે છે કે તેનું સર્ચ તે વાપરતું નથી, તેથી તેને વૈકલ્પિક ગણો.

પાસ: URL નિરીક્ષણ બતાવે છે કે લાઇવ પેજ ઇન્ડેક્સ થઈ શકે છે.

અમે આ તપાસ કેવી રીતે પસંદ કરી

યાદી ક્રૉલર જે રસ્તો લે છે તેને અનુસરે છે: URL સુધી પહોંચવું, robots.txt વાંચવું, ફાયરવૉલ પાર કરવી, HTML વાંચવું, પછી તેનો અર્થ સમજવો. દરેક તપાસ OpenAI, Anthropic, Perplexity અને Google તેમના ક્રૉલર વિશે જે દસ્તાવેજ કરે છે, robots.txt માટે RFC 9309, અને canonical, તારીખો, sitemap અને hreflang પરના Googleના માર્ગદર્શન પર આધારિત છે. AI જવાબો પર કોઈ દસ્તાવેજી અસર ન હોય તેવી તપાસ, જેમ કે કીવર્ડ ડેન્સિટી કે શબ્દસંખ્યાના લક્ષ્ય, અમે છોડી દીધી.

આ તપાસ બતાવે છે કે પેજ વાંચી શકાય છે; તે ટાંકવામાં આવશે એવું બતાવી શકતી નથી. એ બીજા સ્રોતોની તુલનામાં જવાબ કેટલો સારો છે તેના પર આધાર રાખે છે. દરેક ફાયરવૉલ, CDN, થીમ કે CMS ફેરફાર પછી તપાસ 2થી 5 ફરી ચલાવો, કારણ કે આ જ ફેરફારો તેને ચૂપચાપ બગાડે છે.

AISeeWhy આમાંની મોટા ભાગની તપાસ એક જ વારમાં ચલાવે છે: તે અસલ બ્રાઉઝરની સાથે 16 AI અને સર્ચ ક્રૉલર તરીકે પેજ મેળવે છે, દરેક ક્રૉલર માટે robots.txt લાગુ કરે છે અને HTML, માર્કઅપ, canonical અને તારીખો વાંચે છે. મફત તપાસ સ્કોર અને પહેલું તારણ બતાવે છે; પૂરો રિપોર્ટ દરેક સમસ્યા તૈયાર સુધારા સાથે આપે છે.

આ સમસ્યાના સુધારા

મફત ટૂલ

આગળનાં પગલાં

આ લેખમાંના ક્રૉલર

વારંવાર પૂછાતા પ્રશ્નો

શું મારે આ તપાસ દરેક પેજ પર ચલાવવી પડશે?

દરેક નવા પેજ પર તપાસ 1થી 5 ચલાવો, કારણ કે કોઈ એક URL બ્લૉક થઈ શકે છે અથવા તેના પર રહી ગયેલું noindex હોઈ શકે છે. તપાસ 6થી 11 મુખ્યત્વે ટેમ્પલેટ પર આધાર રાખે છે, તેથી દરેક પેજ પ્રકાર માટે એક વાર ચલાવો અને નવાં પેજ વચ્ચે વચ્ચે તપાસો.

હું Googleની જેમ ChatGPT કે Claudeને પેજ સબમિટ કેમ કરી શકતો નથી?

OpenAI, Anthropic અને Perplexity વેબ પેજ માટે URL સબમિશન ટૂલ આપતા નથી. તેમના ક્રૉલર લિંકને અનુસરીને અને સર્ચ દ્વારા પેજ શોધે છે, તેથી આંતરિક લિંક, એક sitemap, અને OAI-SearchBot, Claude-SearchBot અને PerplexityBot માટે ખુલ્લો ઍક્સેસ જ તમારા નિયંત્રણમાં છે.

મારું પેજ બારેય તપાસ પાસ કરે છે. છતાં તે કેમ ટાંકવામાં આવતું નથી?

તપાસ પેજને વાંચી શકાય તેવું બનાવે છે, પસંદગીનું નહીં. આસિસ્ટન્ટ એવા સ્રોત પસંદ કરે છે જે પ્રશ્નનો શ્રેષ્ઠ જવાબ આપે, તેથી તમારા પેજની તુલના તે જે પેજ ટાંકે છે તેની સાથે કરો: શું તે વહેલો જવાબ આપે છે, કિંમતો કે સ્પેસિફિકેશન લખાણમાં આપે છે, અથવા તમારા પેજમાં ન હોય તેવો ડેટા આપે છે.

પ્રકાશિત કર્યા પછી કેટલી જલદી AI ક્રૉલર આવે છે?

કોઈ કંપની સમયપત્રક પ્રકાશિત કરતી નથી. તમારા સર્વર લૉગ બતાવે છે કે OAI-SearchBot, Claude-SearchBot કે PerplexityBotએ પહેલી વાર URL ક્યારે માગ્યું; AI ક્રૉલર માટે સર્વર લૉગ તપાસવા પરની અમારી ગાઇડ બતાવે છે કે તેને કેવી રીતે શોધવા.

સ્રોતો

વધુ લેખો