ಪುಟ ಪ್ರಕಟಿಸುವ ಮೊದಲು ಮಾಡಬೇಕಾದ 12 AEO ಪರಿಶೀಲನೆಗಳು (2027)
ಪ್ರಕಟಿಸುವ ಮೊದಲು, URL redirects ಇಲ್ಲದೆ 200 ನೀಡುತ್ತದೆಯೇ, robots.txt ಪ್ರತಿ AI ಹುಡುಕಾಟ ಕ್ರಾಲರ್ ಅನ್ನು ಅನುಮತಿಸುತ್ತದೆಯೇ, ನಿಮ್ಮ ಫೈರ್ವಾಲ್ ಅವುಗಳಿಗೆ ನಿಜವಾದ ಪುಟ ನೀಡುತ್ತದೆಯೇ, ಉತ್ತರ raw HTML ನಲ್ಲಿದೆಯೇ ಎಂದು ಖಚಿತಪಡಿಸಿ. ನಂತರ ಉಳಿದ noindex ಅಥವಾ nosnippet, ಒಂದೇ canonical, H1 ಕೆಳಗೆ ಉತ್ತರ, ಸರಿಯಾದ ಹೊಂದುವ JSON-LD, ಹೊಂದುವ ದಿನಾಂಕಗಳು, ಆಂತರಿಕ ಲಿಂಕ್ಗಳೊಂದಿಗೆ sitemap ನಮೂದು, hreflang ಪರಿಶೀಲಿಸಿ, ಇಂಡೆಕ್ಸಿಂಗ್ ವಿನಂತಿಸಿ.
AI ಉತ್ತರಗಳಲ್ಲಿ ಎಂದೂ ಕಾಣಿಸದ ಬಹುತೇಕ ಪುಟಗಳು ಬೇಸರದ ಯಾವುದೋ ವಿಷಯದಲ್ಲಿ ವಿಫಲವಾಗುತ್ತವೆ: ಉಳಿದ noindex, ಒಂದು ಫೈರ್ವಾಲ್ ನಿಯಮ, staging ಕಡೆ ತೋರಿಸುವ canonical. ಈ ಹನ್ನೆರಡು ಪರಿಶೀಲನೆಗಳು ಬಿಡುಗಡೆಗೆ ಮೊದಲೇ ಅವನ್ನು ಹಿಡಿಯುತ್ತವೆ. ಪ್ರತಿಯೊಂದಕ್ಕೂ ಕೆಲವೇ ನಿಮಿಷ ಸಾಕು, ಬಹುತೇಕವಕ್ಕೆ ಒಂದು terminal ಮತ್ತು ಪುಟದ URL ಸಾಕು, ಕ್ರಾಲರ್ ಅವನ್ನು ಎದುರಿಸುವ ಕ್ರಮದಲ್ಲಿ ಪಟ್ಟಿ ಮಾಡಲಾಗಿದೆ.
ಈ ಪುಟದಲ್ಲಿ
- ಪ್ರತಿ ಪರಿಶೀಲನೆಗೆ ಎಷ್ಟು ಸಮಯ ಬೇಕು?
- 1. URL redirect ಸರಪಳಿ ಇಲ್ಲದೆ 200 ನೀಡುತ್ತದೆ
- 2. robots.txt ಪ್ರತಿ AI ಹುಡುಕಾಟ ಕ್ರಾಲರ್ಗೆ ಪುಟವನ್ನು ಅನುಮತಿಸುತ್ತದೆ
- 3. ಫೈರ್ವಾಲ್ AI ಕ್ರಾಲರ್ಗಳಿಗೆ ನಿಜವಾದ ಪುಟ ನೀಡುತ್ತದೆ
- 4. ಉತ್ತರ raw HTML ನಲ್ಲಿದೆ
- 5. ಉಳಿದ noindex ಅಥವಾ nosnippet ಇಲ್ಲ
- 6. ಒಂದೇ canonical URL, ಸಂಪೂರ್ಣ ಮತ್ತು ತನ್ನನ್ನೇ ತೋರಿಸುವುದು
- 7. Title ಮತ್ತು H1 ಪುಟ ಯಾವುದಕ್ಕೆ ಉತ್ತರಿಸುತ್ತದೆ ಎಂದು ಹೇಳುತ್ತವೆ, ಉತ್ತರ ತಕ್ಷಣ ಕೆಳಗಿದೆ
- 8. JSON-LD ಸರಿಯಾಗಿ parse ಆಗುತ್ತದೆ ಮತ್ತು ಕಾಣುವ ಪಠ್ಯಕ್ಕೆ ಹೊಂದುತ್ತದೆ
- 9. ಕಾಣುವ ದಿನಾಂಕ, markup ದಿನಾಂಕಗಳು ಮತ್ತು sitemap lastmod ಹೊಂದುತ್ತವೆ
- 10. ಪುಟ sitemap ನಲ್ಲಿದೆ ಮತ್ತು ಸಂಬಂಧಿತ ಪುಟಗಳಿಂದ ಲಿಂಕ್ ಆಗಿದೆ
- 11. hreflang ಪರಸ್ಪರವಾಗಿದೆ, x-default ಸಹಿತ
- 12. ಹೊಸ ಪುಟವನ್ನು crawl ಮಾಡಲು ಹುಡುಕಾಟ ಎಂಜಿನ್ಗಳನ್ನು ಕೇಳಿ
- ಈ ಪರಿಶೀಲನೆಗಳನ್ನು ಹೇಗೆ ಆರಿಸಿದೆವು
ಪ್ರತಿ ಪರಿಶೀಲನೆಗೆ ಎಷ್ಟು ಸಮಯ ಬೇಕು?
ಒಂದು ಪುಟಕ್ಕೆ ಅಂದಾಜು ಮಾರ್ಗದರ್ಶಿ, ಬೇಕಾದ ಟೂಲ್ನೊಂದಿಗೆ. 1 ರಿಂದ 5 ಪರಿಶೀಲನೆಗಳನ್ನು ಪ್ರತಿ ಪುಟದಲ್ಲಿ ಮಾಡಿ; ಉಳಿದವನ್ನು ಪ್ರತಿ ಟೆಂಪ್ಲೇಟ್ಗೆ ಒಮ್ಮೆ, ನಂತರ ಆಗಾಗ ಮಾದರಿಯಾಗಿ ಪರಿಶೀಲಿಸಿ.
- 1. Status 200: 1 ನಿಮಿಷ, curl.
- 2. ಪ್ರತಿ ಕ್ರಾಲರ್ಗೆ robots.txt: 3 ನಿಮಿಷ, ಬ್ರೌಸರ್ ಅಥವಾ curl.
- 3. ಫೈರ್ವಾಲ್ ಪ್ರತಿಕ್ರಿಯೆ: 3 ನಿಮಿಷ, curl.
- 4. raw HTML ನಲ್ಲಿ ಪಠ್ಯ: 2 ನಿಮಿಷ, curl.
- 5. ಉಳಿದ noindex ಅಥವಾ nosnippet ಇಲ್ಲ: 2 ನಿಮಿಷ, curl.
- 6. ಒಂದೇ canonical: 2 ನಿಮಿಷ, view-source.
- 7. Title, H1 ಮತ್ತು ಚಿಕ್ಕ ಉತ್ತರ: 5 ನಿಮಿಷ, ಪುಟ ಓದುವುದು.
- 8. JSON-LD ಸರಿಯಾಗಿದೆ ಮತ್ತು ಹೊಂದುತ್ತದೆ: 5 ನಿಮಿಷ, Rich Results Test ಅಥವಾ Schema Markup Validator.
- 9. ದಿನಾಂಕಗಳು ಹೊಂದುತ್ತವೆ: 3 ನಿಮಿಷ, ಪುಟ, markup ಮತ್ತು sitemap.
- 10. Sitemap ಮತ್ತು ಆಂತರಿಕ ಲಿಂಕ್ಗಳು: 5 ನಿಮಿಷ, sitemap.xml ಮತ್ತು ನಿಮ್ಮ CMS.
- 11. hreflang: 5 ನಿಮಿಷ, ಬಹುಭಾಷಾ ಸೈಟ್ಗಳಿಗೆ ಮಾತ್ರ.
- 12. ಇಂಡೆಕ್ಸಿಂಗ್ ವಿನಂತಿ: 2 ನಿಮಿಷ, Search Console ಮತ್ತು IndexNow.
1. URL redirect ಸರಪಳಿ ಇಲ್ಲದೆ 200 ನೀಡುತ್ತದೆ
ನೀವು ಹಂಚುವ ಮತ್ತು sitemap ನಲ್ಲಿ ಪಟ್ಟಿ ಮಾಡುವ ನಿಖರ URL ನಲ್ಲಿ ಕ್ರಾಲರ್ಗೆ status 200 ನೊಂದಿಗೆ ಪುಟವೇ ಸಿಗಬೇಕು. ಪ್ರತಿ redirect ವಿಫಲವಾಗಬಹುದಾದ ಇನ್ನೊಂದು ಹಂತ, "ಸಿಗಲಿಲ್ಲ" ಸಂದೇಶದೊಂದಿಗೆ 200 ನೀಡುವ ಪುಟ soft 404, ಅದನ್ನು ಹುಡುಕಾಟ ಎಂಜಿನ್ಗಳು ಕೈಬಿಡಬಹುದು.
# Final status, number of redirects and final URL
curl -s -o /dev/null -L -w "%{http_code} redirects=%{num_redirects} %{url_effective}\n" https://example.com/new-page/ ಉತ್ತೀರ್ಣ: 200 redirects=0 ಮತ್ತು ಅದೇ URL ಹಿಂತಿರುಗುತ್ತದೆ. ಸರಿಪಡಿಸಿ: ಅಂತಿಮ URL ಗೆ ಲಿಂಕ್ ನೀಡಿ ಅದನ್ನೇ ಪಟ್ಟಿ ಮಾಡಿ, ಹಳೆಯ ವಿಳಾಸಗಳಿಂದ ಗರಿಷ್ಠ ಒಂದು redirect ಇಡಿ.
2. robots.txt ಪ್ರತಿ AI ಹುಡುಕಾಟ ಕ್ರಾಲರ್ಗೆ ಪುಟವನ್ನು ಅನುಮತಿಸುತ್ತದೆ
ಪ್ರತಿ ಕ್ರಾಲರ್ ಓದುವಂತೆ robots.txt ಓದಿ. ಒಂದು ಕ್ರಾಲರ್ನ ಹೆಸರಿರುವ group ಅದಕ್ಕೆ User-agent: * group ಅನ್ನು ಬದಲಿಸುತ್ತದೆ, RFC 9309 ಪ್ರಕಾರ ಅತಿ ಉದ್ದವಾಗಿ ಹೊಂದುವ ನಿಯಮ ಗೆಲ್ಲುತ್ತದೆ, ಸಮವಾದರೆ Allow ಗೆಲ್ಲುತ್ತದೆ.
ಕನಿಷ್ಠ OAI-SearchBot, Claude-SearchBot, Claude-User, PerplexityBot ಮತ್ತು Googlebot ಪರಿಶೀಲಿಸಿ. ನಿಯಮಗಳು path ಪೂರ್ವಪ್ರತ್ಯಯಗಳಿಗೆ ಹೊಂದುವುದರಿಂದ, /guides/ ನಂತಹ ಹೊಸ ವಿಭಾಗವನ್ನು ಹಳೆಯ Disallow: /g ನಿಯಮ ಹಿಡಿಯಬಹುದು. robots.txt ತಾನೇ 200 ಅಥವಾ 404 ನೀಡುತ್ತದೆಯೇ ಎಂದೂ ಖಚಿತಪಡಿಸಿ: RFC 9309 ಪ್ರಕಾರ ಸರ್ವರ್ ದೋಷ ಎಂದರೆ ಇಡೀ ಸೈಟ್ ನಿರಾಕರಿತ ಎಂದು ಕ್ರಾಲರ್ಗಳು ಭಾವಿಸಬೇಕು.
ಉತ್ತೀರ್ಣ: ಈ tokens ಯಾವುದಕ್ಕೂ ಯಾವ ನಿಯಮವೂ path ಅನ್ನು ನಿರಾಕರಿಸುವುದಿಲ್ಲ. robots.txt ಅನ್ನು ಹೇಗೆ ಪರೀಕ್ಷಿಸುವುದು ಎಂಬ ನಮ್ಮ ಮಾರ್ಗದರ್ಶಿ ಒಂದು ಕ್ರಾಲರ್ಗೆ ಒಂದು URL ಪರೀಕ್ಷಿಸುವುದನ್ನು ತೋರಿಸುತ್ತದೆ.
3. ಫೈರ್ವಾಲ್ AI ಕ್ರಾಲರ್ಗಳಿಗೆ ನಿಜವಾದ ಪುಟ ನೀಡುತ್ತದೆ
ಬ್ರೌಸರ್ user agent ಮತ್ತು ಕ್ರಾಲರ್ user agents ನೊಂದಿಗೆ ಪುಟ ವಿನಂತಿಸಿ, status ಮತ್ತು ಗಾತ್ರ ಹೋಲಿಸಿ. ಹೆಸರಿನಿಂದ ಹೊಂದಿಸುವ ಬಾಟ್ ರಕ್ಷಣೆ ಕ್ರಾಲರ್ಗಳಿಗೆ ಮಾತ್ರ 403, 429 ಅಥವಾ ಚಾಲೆಂಜ್ ಪುಟ ನೀಡಬಹುದು.
URL=https://example.com/new-page/
for UA in "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36" \
"Mozilla/5.0 (compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot)" \
"Mozilla/5.0 (compatible; Claude-SearchBot)" \
"Mozilla/5.0 (compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot)"; do
curl -s -o /dev/null -w "%{http_code} %{size_download} $UA\n" -A "$UA" "$URL"
done ಉತ್ತೀರ್ಣ: ಪ್ರತಿ ಸಾಲೂ 200 ಮತ್ತು ಸಮಾನ ಗಾತ್ರ ತೋರಿಸುತ್ತದೆ. ತುಂಬಾ ಚಿಕ್ಕ ಗಾತ್ರ ಎಂದರೆ ಸಾಮಾನ್ಯವಾಗಿ ಚಾಲೆಂಜ್ ಪುಟ. ಈ strings ಹೆಸರಿನಿಂದ ಹೊಂದಿಸುವ ನಿಯಮಗಳನ್ನು ಪರೀಕ್ಷಿಸುತ್ತವೆ; ನಿಜವಾದ ಕ್ರಾಲರ್ಗಳು ಪ್ರಕಟಿತ IP ವ್ಯಾಪ್ತಿಗಳಿಂದಲೂ ಬರುತ್ತವೆ, ಅದನ್ನು ನಿಮ್ಮ ಯಂತ್ರದಿಂದ ಮಾಡುವ ಪರೀಕ್ಷೆ ಮರುಸೃಷ್ಟಿಸಲಾರದು, ಹಾಗಾಗಿ ಆ ವ್ಯಾಪ್ತಿಗಳಿಗಾಗಿ ನಿಮ್ಮ ಫೈರ್ವಾಲ್ನ allow ನಿಯಮಗಳನ್ನೂ ಪರಿಶೀಲಿಸಿ.
4. ಉತ್ತರ raw HTML ನಲ್ಲಿದೆ
ಸರ್ವರ್ ಕಳುಹಿಸುವ HTML ನಲ್ಲಿ ನಿಮ್ಮ ಉತ್ತರದ ಒಂದು ವಾಕ್ಯಕ್ಕಾಗಿ ಹುಡುಕಿ. ಬ್ರೌಸರ್ನ element inspector, scripts ಚಲಾದ ನಂತರದ ಪುಟವನ್ನು ತೋರಿಸುತ್ತದೆ, ಅದು ಬಹುತೇಕ ಕ್ರಾಲರ್ಗಳಿಗೆ ಸಿಗುವುದಲ್ಲ.
curl -s https://example.com/new-page/ | grep -c "a sentence from your short answer" ಉತ್ತೀರ್ಣ: 1 ಅಥವಾ ಹೆಚ್ಚು. 0 ಎಂದರೆ ಪಠ್ಯವನ್ನು JavaScript ಸೇರಿಸುತ್ತದೆ, ತಮ್ಮ ಕ್ರಾಲರ್ಗಳು ಅದನ್ನು ಚಲಾಯಿಸುತ್ತವೆ ಎಂದು OpenAI, Anthropic ಮತ್ತು Perplexity ದಾಖಲಿಸಿಲ್ಲ. ಅದನ್ನು ಸರ್ವರ್ನಲ್ಲಿ ಅಥವಾ build ಸಮಯದಲ್ಲಿ render ಮಾಡಿ; JavaScript ವಿಷಯ ಮತ್ತು AI ಕ್ರಾಲರ್ಗಳ ಕುರಿತ ನಮ್ಮ ಮಾರ್ಗದರ್ಶಿ ಆಯ್ಕೆಗಳನ್ನು ಪಟ್ಟಿ ಮಾಡುತ್ತದೆ.
5. ಉಳಿದ noindex ಅಥವಾ nosnippet ಇಲ್ಲ
Staging ಸೈಟ್ಗಳು ಆಗಾಗ noindex ನೊಂದಿಗೆ ಬರುತ್ತವೆ, ಒಂದು ಟೆಂಪ್ಲೇಟ್ ಅದನ್ನು production ಗೆ ಒಯ್ಯಬಹುದು. robots meta tag ಮತ್ತು X-Robots-Tag HTTP header ಎರಡನ್ನೂ ಪರಿಶೀಲಿಸಿ, ಏಕೆಂದರೆ ಯಾವುದಾದರೂ ಒಂದು ಲೆಕ್ಕಕ್ಕೆ ಬರುತ್ತದೆ.
curl -s -D - -o /tmp/page.html https://example.com/new-page/ | grep -i "x-robots-tag"
grep -i -o '<meta[^>]*name="robots"[^>]*>' /tmp/page.html ಉತ್ತೀರ್ಣ: ಏನೂ ಮುದ್ರಿತವಾಗಿಲ್ಲ, ಅಥವಾ index, follow ಮತ್ತು ಅಂತಹವು ಮಾತ್ರ. AI Overviews ಮತ್ತು AI Mode ನಲ್ಲಿ ಕಾಣಲು ಪುಟ ಇಂಡೆಕ್ಸ್ ಆಗಿದ್ದು snippet ಗೆ ಅರ್ಹವಾಗಿರಬೇಕು, nosnippet ಅವುಗಳಿಗೆ ನೇರ ಇನ್ಪುಟ್ ಆಗಿ ಬಳಕೆಯನ್ನೂ ತಡೆಯುತ್ತದೆ ಎಂದು Google ಹೇಳುತ್ತದೆ.
6. ಒಂದೇ canonical URL, ಸಂಪೂರ್ಣ ಮತ್ತು ತನ್ನನ್ನೇ ತೋರಿಸುವುದು
ಪುಟ ನಿಖರವಾಗಿ ಒಂದು rel="canonical" ಅನ್ನು, ಸಂಪೂರ್ಣ URL ಆಗಿ, ನೀವು ಪ್ರಕಟಿಸುವ URL ಅನ್ನು ತೋರಿಸುವಂತೆ ಘೋಷಿಸಬೇಕು. Google canonical ಅನ್ನು ಆಜ್ಞೆಯಲ್ಲ, ಬಲವಾದ ಸಂಕೇತ ಎನ್ನುತ್ತದೆ, relative URL ಗಳ ವಿರುದ್ಧ ಮತ್ತು ಬೇರೆ ವಿಳಾಸ ಪಟ್ಟಿ ಮಾಡುವ sitemap ನಂತಹ ವಿರುದ್ಧ ಸಂಕೇತಗಳ ವಿರುದ್ಧ ಎಚ್ಚರಿಸುತ್ತದೆ.
ಬಿಡುಗಡೆಯ ಸಾಮಾನ್ಯ ತಪ್ಪುಗಳು: ಟೆಂಪ್ಲೇಟ್ ಪುಟದಿಂದ ನಕಲಿಸಿದ canonical, ಇನ್ನೂ staging host ತೋರಿಸುವ canonical, ಒಂದು theme ಮತ್ತು ಒಂದು plugin ಒಟ್ಟಿಗೆ ಸೇರಿಸುವ ಎರಡು canonical tags.
ಉತ್ತೀರ್ಣ: ಒಂದು tag, ಲೈವ್ URL, sitemap ನಲ್ಲಿರುವ ಅದೇ protocol ಮತ್ತು host.
7. Title ಮತ್ತು H1 ಪುಟ ಯಾವುದಕ್ಕೆ ಉತ್ತರಿಸುತ್ತದೆ ಎಂದು ಹೇಳುತ್ತವೆ, ಉತ್ತರ ತಕ್ಷಣ ಕೆಳಗಿದೆ
ಪುಟದ ಮೇಲ್ಭಾಗವನ್ನು ಅಪರಿಚಿತರು ಓದುವಂತೆ ಓದಿ. Title ಮತ್ತು H1 ಖರೀದಿದಾರರು ಬಳಸುವ ಪದಗಳಲ್ಲಿ ಪ್ರಶ್ನೆ ಅಥವಾ ವಿಷಯವನ್ನು ಹೇಳಬೇಕು, H1 ಕೆಳಗಿನ ಮೊದಲ ಎರಡು ಮೂರು ವಾಕ್ಯಗಳು ಅದಕ್ಕೆ ಪೂರ್ಣವಾಗಿ ಉತ್ತರಿಸಬೇಕು.
ಹುಡುಕಾಟ ಫಲಿತಾಂಶಗಳಲ್ಲಿ ಕತ್ತರಿಸಲ್ಪಡುವ ಸಾಧ್ಯತೆ ಕಡಿಮೆಯಾಗಲು title ಅನ್ನು ಸುಮಾರು 60 ಅಕ್ಷರಗಳೊಳಗೆ ಇಡಿ. ಸಂಖ್ಯೆಗಳು, ಘಟಕಗಳು ಮತ್ತು ಉತ್ಪನ್ನದ ಹೆಸರನ್ನು ಪೂರ್ಣವಾಗಿ ಬರೆದು, ಪ್ರತ್ಯೇಕವಾಗಿ ಉಲ್ಲೇಖಿಸಿದರೂ ಅರ್ಥವಾಗುವಂತೆ ಚಿಕ್ಕ ಉತ್ತರ ಬರೆಯಿರಿ.
ಉತ್ತೀರ್ಣ: ಮೊದಲ ಪ್ಯಾರಾ ಮಾತ್ರ ಓದುವವರಿಗೆ ಉತ್ತರ ಸಿಗುತ್ತದೆ. AI ಉತ್ತರಗಳಲ್ಲಿ ಉಲ್ಲೇಖ ಪಡೆಯುವ ಮಾರ್ಗಗಳ ನಮ್ಮ ಪಟ್ಟಿ ಉಲ್ಲೇಖಕ್ಕಾಗಿ ಬರೆಯುವುದನ್ನು ಇನ್ನಷ್ಟು ಆಳವಾಗಿ ವಿವರಿಸುತ್ತದೆ.
8. JSON-LD ಸರಿಯಾಗಿ parse ಆಗುತ್ತದೆ ಮತ್ತು ಕಾಣುವ ಪಠ್ಯಕ್ಕೆ ಹೊಂದುತ್ತದೆ
ಮುರಿದ JSON-LD ಸಂಪೂರ್ಣವಾಗಿ ನಿರ್ಲಕ್ಷಿಸಲ್ಪಡುತ್ತದೆ, ಹಾಗಾಗಿ ಒಂದು ಅಲ್ಪವಿರಾಮ ತಪ್ಪಿದರೆ ಎಲ್ಲವೂ ಹೋಗುತ್ತದೆ. URL ಅನ್ನು Google ನ Rich Results Test ಅಥವಾ Schema Markup Validator ನಲ್ಲಿ ಅಂಟಿಸಿ ಪ್ರತಿ ದೋಷ ಸರಿಪಡಿಸಿ.
ನಂತರ ಮೌಲ್ಯಗಳನ್ನು ಪುಟದೊಂದಿಗೆ ಹೋಲಿಸಿ. Markup ನ headline, ದಿನಾಂಕಗಳು, ಬೆಲೆ, ಕರೆನ್ಸಿ ಮತ್ತು ಸಂಸ್ಥೆಯ ಹೆಸರು ಓದುಗ ನೋಡುವವೇ ಆಗಿರಬೇಕು. ತನ್ನ AI ವೈಶಿಷ್ಟ್ಯಗಳಿಗೆ ವಿಶೇಷ markup ಬೇಕಿಲ್ಲ, structured data ಕಾಣುವ ಪಠ್ಯಕ್ಕೆ ಹೊಂದಬೇಕು ಎಂದು Google ಹೇಳುತ್ತದೆ.
ಉತ್ತೀರ್ಣ: ದೋಷಗಳಿಲ್ಲ, ಪ್ರತಿ ಮೌಲ್ಯವೂ ಪುಟದಲ್ಲಿ ಕಾಣುತ್ತದೆ. ಬಿಟ್ಟುಬಿಡಿ: ಪುಟ ಪ್ರಕಾರಕ್ಕೆ ಹೊಂದುವ markup ಇಲ್ಲದಿದ್ದರೆ; ತಪ್ಪು markup ಗಿಂತ ಸರಳ ಪುಟ ಉತ್ತಮ.
9. ಕಾಣುವ ದಿನಾಂಕ, markup ದಿನಾಂಕಗಳು ಮತ್ತು sitemap lastmod ಹೊಂದುತ್ತವೆ
ಪುಟದಲ್ಲಿ ಲೇಬಲ್ನೊಂದಿಗೆ ದಿನಾಂಕ ತೋರಿಸಿ, ಅದೇ ದಿನಾಂಕಗಳನ್ನು datePublished ಮತ್ತು dateModified ನಲ್ಲಿ ಬಳಸಿ, sitemap lastmod ಅನ್ನು ಕೊನೆಯ ಗಮನಾರ್ಹ ಬದಲಾವಣೆಗೆ ಹೊಂದಿಸಿ. ಕಾಣುವ ದಿನಾಂಕ ಮತ್ತು markup ದಿನಾಂಕ ಹೊಂದಬೇಕು ಎಂದು Google ಕೇಳುತ್ತದೆ, lastmod ಸತತವಾಗಿ ಮತ್ತು ಪರಿಶೀಲಿಸಬಹುದಾದಂತೆ ನಿಖರವಾಗಿದ್ದರೆ ಮಾತ್ರ ಬಳಸುವುದಾಗಿ ಹೇಳುತ್ತದೆ.
ಪ್ರತಿ build ನಲ್ಲಿ ಪ್ರತಿ URL ಗೆ ಇಂದಿನ ದಿನಾಂಕ ಮುದ್ರಿಸುವ sitemap generator, ಹೊಸ ಪುಟಕ್ಕೆ ಮಾತ್ರವಲ್ಲ, ಎಲ್ಲ ಪುಟಗಳಿಗೂ lastmod ಅನ್ನು ನಿಷ್ಪ್ರಯೋಜಕವಾಗಿಸುತ್ತದೆ.
ಉತ್ತೀರ್ಣ: ಮೂರು ಸ್ಥಳಗಳು, ಒಂದೇ ದಿನಾಂಕ.
10. ಪುಟ sitemap ನಲ್ಲಿದೆ ಮತ್ತು ಸಂಬಂಧಿತ ಪುಟಗಳಿಂದ ಲಿಂಕ್ ಆಗಿದೆ
ಕ್ರಾಲರ್ಗಳು ಲಿಂಕ್ಗಳು ಮತ್ತು sitemaps ಮೂಲಕ ಪುಟಗಳನ್ನು ಕಂಡುಕೊಳ್ಳುತ್ತವೆ. ನಿಖರ canonical URL ಬಳಸಿ ಹೊಸ URL ಅನ್ನು ನಿಮ್ಮ XML sitemap ಗೆ ಸೇರಿಸಿ, ಕನಿಷ್ಠ ಎರಡು ಸಂಬಂಧಿತ ಪುಟಗಳಿಂದ ಮತ್ತು ಒಂದು hub ಅಥವಾ index ಪುಟದಿಂದ ಅದಕ್ಕೆ ಲಿಂಕ್ ನೀಡಿ.
ಒಂದು sitemap ಫೈಲ್ 50,000 URL ಗಳವರೆಗೆ ಮತ್ತು ಸಂಕುಚಿಸದೆ 50 MB ವರೆಗೆ ಹಿಡಿಯಬಹುದು; ದೊಡ್ಡ ಸೈಟ್ಗಳಿಗೆ sitemap index ಬೇಕು. priority ಮತ್ತು changefreq ಅನ್ನು ನಿರ್ಲಕ್ಷಿಸುವುದಾಗಿ Google ಹೇಳುತ್ತದೆ, ಹಾಗಾಗಿ ಅವುಗಳ ಮೇಲೆ ಸಮಯ ವ್ಯಯಿಸಬೇಡಿ. ಆಂತರಿಕ ಲಿಂಕ್ಗಳಿಲ್ಲದ ಪುಟ ಅನಾಥ, ಕ್ರಾಲರ್ಗಳು ಅದನ್ನು ತಡವಾಗಿ ಕಾಣಬಹುದು ಅಥವಾ ಕಾಣದೆಯೇ ಇರಬಹುದು.
ಉತ್ತೀರ್ಣ: URL sitemap ನಲ್ಲಿದೆ, ಕನಿಷ್ಠ ಎರಡು ಪುಟಗಳು ವಿವರಣಾತ್ಮಕ anchor text ನೊಂದಿಗೆ ಅದಕ್ಕೆ ಲಿಂಕ್ ನೀಡುತ್ತವೆ.
11. hreflang ಪರಸ್ಪರವಾಗಿದೆ, x-default ಸಹಿತ
ಪುಟ ಹಲವು ಭಾಷೆಗಳಲ್ಲಿದ್ದರೆ, ಪ್ರತಿ ಆವೃತ್ತಿಯೂ ತನ್ನನ್ನೂ ಸೇರಿಸಿ ಎಲ್ಲ ಆವೃತ್ತಿಗಳನ್ನು ಪಟ್ಟಿ ಮಾಡಬೇಕು, ಪ್ರತಿಯೊಂದೂ ಹಿಂತಿರುಗಿ ಲಿಂಕ್ ನೀಡಬೇಕು. ಇನ್ನೊಂದು ಕಡೆಯಿಂದ ದೃಢೀಕರಿಸದ hreflang ಟಿಪ್ಪಣಿಗಳನ್ನು Google ನಿರ್ಲಕ್ಷಿಸುತ್ತದೆ. ಯಾವ ಭಾಷೆಯೂ ಹೊಂದದಿದ್ದಾಗ ತೋರಿಸುವ ಆವೃತ್ತಿಗೆ x-default ಸೇರಿಸಿ.
ಬಿಟ್ಟುಬಿಡಿ: ಸೈಟ್ನಲ್ಲಿ ಒಂದೇ ಭಾಷೆ ಇದ್ದರೆ. hreflang x-default ಕುರಿತ ನಮ್ಮ ಮಾರ್ಗದರ್ಶಿ ಅದು ಯಾವಾಗ ಬೇಕು ಎಂದು ವಿವರಿಸುತ್ತದೆ.
12. ಹೊಸ ಪುಟವನ್ನು crawl ಮಾಡಲು ಹುಡುಕಾಟ ಎಂಜಿನ್ಗಳನ್ನು ಕೇಳಿ
ಪುಟ ಲೈವ್ ಆಗಿ ಮೇಲಿನ ಪರಿಶೀಲನೆಗಳಲ್ಲಿ ಉತ್ತೀರ್ಣವಾದ ನಂತರ, ಅದರ ಬಗ್ಗೆ ಹುಡುಕಾಟ ಎಂಜಿನ್ಗಳಿಗೆ ತಿಳಿಸಿ. Google Search Console ನಲ್ಲಿ ಹೊಸ URL ಮೇಲೆ URL ಪರಿಶೀಲನೆ ಬಳಸಿ, ಇಂಡೆಕ್ಸಿಂಗ್ ವಿನಂತಿಸಿ ಆಯ್ಕೆಮಾಡಿ. Bing ಮತ್ತು IndexNow ಬೆಂಬಲಿಸುವ ಇತರ ಎಂಜಿನ್ಗಳಿಗೆ, ನಿಮ್ಮ key ಯೊಂದಿಗೆ URL ಅನ್ನು IndexNow endpoint ಗೆ ಸಲ್ಲಿಸಿ; ಇದು crawling ಅಥವಾ ಇಂಡೆಕ್ಸಿಂಗ್ಗೆ ಭರವಸೆಯಲ್ಲ ಎಂದು Bing ಗಮನಿಸುತ್ತದೆ.
AI ಸಹಾಯಕಗಳಿಗೆ ಸಲ್ಲಿಕೆ ಫಾರ್ಮ್ ಇಲ್ಲ. ಅವುಗಳ ಕ್ರಾಲರ್ಗಳು ಲಿಂಕ್ಗಳು ಮತ್ತು ಹುಡುಕಾಟದ ಮೂಲಕ ಪುಟ ಕಂಡುಕೊಳ್ಳುತ್ತವೆ, ಅದಕ್ಕೇ 2, 3 ಮತ್ತು 10 ಪರಿಶೀಲನೆಗಳು ಮುಖ್ಯ. ನೀವು llms.txt ಫೈಲ್ ಪ್ರಕಟಿಸಿದರೆ, ಪುಟವನ್ನು ಅಲ್ಲಿಗೂ ಸೇರಿಸಿ; ತನ್ನ Search ಅದನ್ನು ಬಳಸುವುದಿಲ್ಲ ಎಂದು Google ಹೇಳುತ್ತದೆ, ಹಾಗಾಗಿ ಅದನ್ನು ಐಚ್ಛಿಕ ಎಂದು ಪರಿಗಣಿಸಿ.
ಉತ್ತೀರ್ಣ: ಲೈವ್ ಪುಟವನ್ನು ಇಂಡೆಕ್ಸ್ ಮಾಡಬಹುದು ಎಂದು URL ಪರಿಶೀಲನೆ ತೋರಿಸುತ್ತದೆ.
ಈ ಪರಿಶೀಲನೆಗಳನ್ನು ಹೇಗೆ ಆರಿಸಿದೆವು
ಪಟ್ಟಿ ಕ್ರಾಲರ್ ಸಾಗುವ ದಾರಿಯನ್ನು ಅನುಸರಿಸುತ್ತದೆ: URL ತಲುಪುವುದು, robots.txt ಓದುವುದು, ಫೈರ್ವಾಲ್ ದಾಟುವುದು, HTML ಓದುವುದು, ನಂತರ ಅದನ್ನು ಅರ್ಥೈಸುವುದು. ಪ್ರತಿ ಪರಿಶೀಲನೆಯೂ OpenAI, Anthropic, Perplexity ಮತ್ತು Google ತಮ್ಮ ಕ್ರಾಲರ್ಗಳ ಬಗ್ಗೆ ದಾಖಲಿಸಿರುವುದನ್ನು, robots.txt ಗಾಗಿ RFC 9309 ಅನ್ನು, ಹಾಗೂ canonicals, ದಿನಾಂಕಗಳು, sitemaps ಮತ್ತು hreflang ಕುರಿತ Google ಮಾರ್ಗಸೂಚಿಯನ್ನು ಆಧರಿಸಿದೆ. keyword ಸಾಂದ್ರತೆ ಅಥವಾ ಪದ ಸಂಖ್ಯೆಯ ಗುರಿಗಳಂತಹ, AI ಉತ್ತರಗಳ ಮೇಲೆ ದಾಖಲಿತ ಪರಿಣಾಮವಿಲ್ಲದ ಪರಿಶೀಲನೆಗಳನ್ನು ಬಿಟ್ಟಿದ್ದೇವೆ.
ಪುಟವನ್ನು ಓದಬಹುದು ಎಂದು ಪರಿಶೀಲನೆಗಳು ತೋರಿಸುತ್ತವೆ; ಅದು ಉಲ್ಲೇಖಿತವಾಗುತ್ತದೆ ಎಂದು ತೋರಿಸಲಾರವು. ಅದು ಇತರ ಮೂಲಗಳಿಗೆ ಹೋಲಿಸಿದರೆ ಉತ್ತರ ಎಷ್ಟು ಉತ್ತಮ ಎಂಬುದರ ಮೇಲೆ ಅವಲಂಬಿಸಿದೆ. ಪ್ರತಿ ಫೈರ್ವಾಲ್, CDN, theme ಅಥವಾ CMS ಬದಲಾವಣೆಯ ನಂತರ 2 ರಿಂದ 5 ಪರಿಶೀಲನೆಗಳನ್ನು ಮತ್ತೆ ಮಾಡಿ, ಏಕೆಂದರೆ ಆ ಬದಲಾವಣೆಗಳೇ ಅವನ್ನು ಸದ್ದಿಲ್ಲದೆ ರದ್ದುಗೊಳಿಸುತ್ತವೆ.
AISeeWhy ಇವುಗಳಲ್ಲಿ ಬಹುತೇಕ ಪರಿಶೀಲನೆಗಳನ್ನು ಒಂದೇ ಸುತ್ತಿನಲ್ಲಿ ಮಾಡುತ್ತದೆ: ಅದು ಪುಟವನ್ನು ನಿಜವಾದ ಬ್ರೌಸರ್ ಜೊತೆಗೆ 16 AI ಮತ್ತು ಹುಡುಕಾಟ ಕ್ರಾಲರ್ಗಳಾಗಿ ಪಡೆಯುತ್ತದೆ, ಪ್ರತಿ ಕ್ರಾಲರ್ಗೆ robots.txt ಅನ್ವಯಿಸುತ್ತದೆ, HTML, markup, canonical ಮತ್ತು ದಿನಾಂಕಗಳನ್ನು ಓದುತ್ತದೆ. ಉಚಿತ ಪರಿಶೀಲನೆ ಅಂಕ ಮತ್ತು ಮೊದಲ ಸಮಸ್ಯೆಯನ್ನು ತೋರಿಸುತ್ತದೆ; ಪೂರ್ಣ ವರದಿ ಪ್ರತಿ ಸಮಸ್ಯೆಯನ್ನು ಸಿದ್ಧ ಪರಿಹಾರದೊಂದಿಗೆ ಪಟ್ಟಿ ಮಾಡುತ್ತದೆ.
ಈ ಸಮಸ್ಯೆಗೆ ಪರಿಹಾರಗಳು
- OAI-SearchBot ಅನ್ನು ತಡೆಯಲಾಗಿದೆ
- ಪುಟದ ವಿಷಯಕ್ಕೆ JavaScript ಬೇಕು
- ಸರಳ ಪಠ್ಯವಾಗಿ ಬರೆದ ಪಟ್ಟಿಗಳು
- ವಿಭಾಗಗಳು ಚಿಕ್ಕ ಉತ್ತರದಿಂದ ಆರಂಭವಾಗುವುದಿಲ್ಲ: 3 ರಲ್ಲಿ 2
ಮುಂದಿನ ಹಂತಗಳು
- AI ಕ್ರಾಲರ್ಗಳಿಗೆ robots.txt ಪರೀಕ್ಷಕ ಮತ್ತು ಪರಿಶೀಲಕ
- llms.txt ಪರಿಶೀಲಕ ಮತ್ತು ವ್ಯಾಲಿಡೇಟರ್
- ಪೂರ್ಣ ವರದಿಯ ಒಂದು ಉದಾಹರಣೆ ನೋಡಿ
- AI ಕ್ರಾಲರ್ ಮೇಲ್ವಿಚಾರಣೆ
- ಪ್ಲಾನ್ಗಳು ಮತ್ತು ಬೆಲೆಗಳು
ಈ ಲೇಖನದಲ್ಲಿರುವ ಕ್ರಾಲರ್ಗಳು
ಪದೇ ಪದೇ ಕೇಳುವ ಪ್ರಶ್ನೆಗಳು
ಈ ಪರಿಶೀಲನೆಗಳನ್ನು ಪ್ರತಿ ಪುಟದಲ್ಲೂ ಮಾಡಬೇಕೇ?
ಪ್ರತಿ ಹೊಸ ಪುಟದಲ್ಲಿ 1 ರಿಂದ 5 ಪರಿಶೀಲನೆಗಳನ್ನು ಮಾಡಿ, ಏಕೆಂದರೆ ಒಂದೇ URL ತಡೆಯಲ್ಪಡಬಹುದು ಅಥವಾ ಉಳಿದ noindex ಹೊಂದಿರಬಹುದು. 6 ರಿಂದ 11 ಪರಿಶೀಲನೆಗಳು ಹೆಚ್ಚಾಗಿ ಟೆಂಪ್ಲೇಟ್ ಮೇಲೆ ಅವಲಂಬಿಸಿವೆ, ಹಾಗಾಗಿ ಪ್ರತಿ ಪುಟ ಪ್ರಕಾರಕ್ಕೆ ಒಮ್ಮೆ ಮಾಡಿ ಹೊಸ ಪುಟಗಳನ್ನು ಆಗಾಗ ಮಾದರಿಯಾಗಿ ಪರಿಶೀಲಿಸಿ.
Google ಗೆ ಸಲ್ಲಿಸುವಂತೆ ChatGPT ಅಥವಾ Claude ಗೆ ಪುಟ ಏಕೆ ಸಲ್ಲಿಸಲಾಗದು?
OpenAI, Anthropic ಮತ್ತು Perplexity ವೆಬ್ ಪುಟಗಳಿಗೆ URL ಸಲ್ಲಿಕೆ ಟೂಲ್ ನೀಡುವುದಿಲ್ಲ. ಅವುಗಳ ಕ್ರಾಲರ್ಗಳು ಲಿಂಕ್ಗಳನ್ನು ಅನುಸರಿಸಿ ಮತ್ತು ಹುಡುಕಾಟದ ಮೂಲಕ ಪುಟಗಳನ್ನು ಕಂಡುಕೊಳ್ಳುತ್ತವೆ, ಹಾಗಾಗಿ ಆಂತರಿಕ ಲಿಂಕ್ಗಳು, sitemap ಮತ್ತು OAI-SearchBot, Claude-SearchBot ಮತ್ತು PerplexityBot ಗೆ ತೆರೆದ ಪ್ರವೇಶ ನಿಮ್ಮ ನಿಯಂತ್ರಣದಲ್ಲಿರುವವು.
ನನ್ನ ಪುಟ ಎಲ್ಲ ಹನ್ನೆರಡು ಪರಿಶೀಲನೆಗಳಲ್ಲೂ ಉತ್ತೀರ್ಣ. ಆದರೂ ಏಕೆ ಉಲ್ಲೇಖಿತವಾಗುತ್ತಿಲ್ಲ?
ಪರಿಶೀಲನೆಗಳು ಪುಟವನ್ನು ಓದಬಲ್ಲದ್ದಾಗಿಸುತ್ತವೆ, ಆದ್ಯತೆಯದ್ದಾಗಿ ಅಲ್ಲ. ಸಹಾಯಕ ಪ್ರಶ್ನೆಗೆ ಅತ್ಯುತ್ತಮವಾಗಿ ಉತ್ತರಿಸುವ ಮೂಲಗಳನ್ನು ಆರಿಸುತ್ತದೆ, ಹಾಗಾಗಿ ಅದು ಉಲ್ಲೇಖಿಸುವ ಪುಟಗಳೊಂದಿಗೆ ನಿಮ್ಮ ಪುಟವನ್ನು ಹೋಲಿಸಿ: ಅವು ಬೇಗ ಉತ್ತರಿಸುತ್ತವೆಯೇ, ಬೆಲೆ ಅಥವಾ ವಿವರಣೆಗಳನ್ನು ಪಠ್ಯದಲ್ಲಿ ಹೇಳುತ್ತವೆಯೇ, ನಿಮ್ಮಲ್ಲಿಲ್ಲದ ಡೇಟಾ ನೀಡುತ್ತವೆಯೇ.
ಪ್ರಕಟಿಸಿದ ನಂತರ AI ಕ್ರಾಲರ್ಗಳು ಎಷ್ಟು ಬೇಗ ಬರುತ್ತವೆ?
ಯಾವ ಕಂಪನಿಯೂ ವೇಳಾಪಟ್ಟಿ ಪ್ರಕಟಿಸುವುದಿಲ್ಲ. OAI-SearchBot, Claude-SearchBot ಅಥವಾ PerplexityBot ಮೊದಲು URL ಅನ್ನು ಯಾವಾಗ ವಿನಂತಿಸಿದವು ಎಂದು ನಿಮ್ಮ ಸರ್ವರ್ logs ತೋರಿಸುತ್ತವೆ; AI ಕ್ರಾಲರ್ಗಳಿಗಾಗಿ ಸರ್ವರ್ logs ಪರಿಶೀಲಿಸುವ ನಮ್ಮ ಮಾರ್ಗದರ್ಶಿ ಅವನ್ನು ಹೇಗೆ ಕಂಡುಹಿಡಿಯುವುದು ಎಂದು ತೋರಿಸುತ್ತದೆ.
ಮೂಲಗಳು
- RFC 9309: Robots Exclusion Protocol (robots.txt ಶಿಷ್ಟಾಚಾರ)
- OpenAI: OpenAI ಕ್ರಾಲರ್ಗಳ ಅವಲೋಕನ
- Anthropic: Anthropic ವೆಬ್ನಿಂದ ಡೇಟಾ crawl ಮಾಡುತ್ತದೆಯೇ, ಸೈಟ್ ಮಾಲೀಕರು ಕ್ರಾಲರ್ ಅನ್ನು ಹೇಗೆ ತಡೆಯಬಹುದು?
- Perplexity: Perplexity ಕ್ರಾಲರ್ಗಳು
- Google Search Central: AI ವೈಶಿಷ್ಟ್ಯಗಳು ಮತ್ತು ನಿಮ್ಮ ವೆಬ್ಸೈಟ್
- Google Search Central: Robots meta tag, data-nosnippet ಮತ್ತು X-Robots-Tag
- Google Search Central: canonical URL ಅನ್ನು ಹೇಗೆ ಸೂಚಿಸುವುದು
- Google Search Central: ನಿಮ್ಮ byline ದಿನಾಂಕಗಳ ಮೇಲೆ ಪ್ರಭಾವ ಬೀರುವುದು
- Google Search Central: sitemap ರಚಿಸಿ ಸಲ್ಲಿಸುವುದು
- Sitemaps.org: Sitemaps XML ಸ್ವರೂಪ
- Google Search Central: ನಿಮ್ಮ ಪುಟದ ಸ್ಥಳೀಯ ಆವೃತ್ತಿಗಳ ಬಗ್ಗೆ Google ಗೆ ತಿಳಿಸುವುದು
- Google Search Console ಸಹಾಯ: URL ಪರಿಶೀಲನಾ ಟೂಲ್
- Bing: IndexNow, ಪ್ರಾರಂಭಿಸುವುದು
- Google Search Console ಸಹಾಯ: Rich Results Test
- Schema.org: Schema Markup Validator ಟೂಲ್
- Google Search Central: JavaScript SEO ಮೂಲಭೂತಗಳು