AI ክሮውለሮች በJavaScript የሚታይ ይዘትን ማንበብ ይችላሉ?
ብዙ ጊዜ አይችሉም። Googlebot JavaScriptን በኋለኛ ደረጃ render ያደርጋል፣ ግን አብዛኞቹ AI ክሮውለሮች ይህን እንደሚያደርጉ በሰነዳቸው አይገልጹም፣ Google ራሱም ሁሉም ቦቶች JavaScriptን ማስኬድ እንደማይችሉ ይናገራል። ጽሑፍዎ ስክሪፕቶች ከሠሩ በኋላ ብቻ የሚታይ ከሆነ፣ AI ክሮውለር ባዶ ገጽ ሊቀበል ይችላል። ዋናውን ይዘት በserver-side rendering ወይም በstatic ገጾች በመጀመሪያው HTML ውስጥ ያቅርቡ።
Single-page መተግበሪያዎች እና client-side frameworks በየቦታው አሉ፣ በአሳሽ ውስጥም ጥሩ ሆነው ይታያሉ። አገልጋይዎ የሚልከውን HTML ብቻ የሚያነብ ክሮውለር ግን ሌላ ነገር ያያል፦ አንድ <div id="root"></div>፣ ጥቂት የስክሪፕት መለያዎች እና ትንሽ ጽሑፍ ወይም ምንም። ለAI መልሶች ያ ገጽ የሚጠቀስ ነገር የለውም።
በዚህ ገጽ ላይ
AI ክሮውለሮች የJavaScript ይዘትን የሚያጡት ለምንድን ነው?
JavaScriptን ማስኬድ ውድ ነው። ክሮውለሩ ስክሪፕቶቹን ማውረድ፣ በአሳሽ ሞተር ውስጥ ማስኬድ እና ውሂቡ እስኪጫን መጠበቅ አለበት። Google ይህን ለፍለጋ ያደርጋል፦ crawl ያደርጋል፣ ገጾችን ለrendering ወረፋ ያስይዛል፣ ሀብት ሲፈቅድ ደግሞ በheadless Chromium render ያደርጋቸዋል። ያም ሆኖ Google server-side rendering ወይም prerenderingን ይመክራል፣ ምክንያቱም ለተጠቃሚዎችም ለክሮውለሮችም ፈጣን ነው፣ ሁሉም ቦቶች JavaScriptን ማስኬድ እንደማይችሉም ይጠቅሳል።
OpenAI፣ Anthropic እና Perplexity ወኪሎቻቸው JavaScriptን እንደሚያስኬዱ በክሮውለር ሰነዳቸው አይገልጹም። Apple Applebot ገጾችን በአሳሽ ውስጥ render ሊያደርግ እንደሚችል ይናገራል። ግልጽ መግለጫ በሌለበት፣ ለAI ክሮውለሮች አስተማማኙ ግምት የመጀመሪያውን HTML ብቻ ያነባሉ የሚለው ነው።
ክሮውለር የሚቀበለውን እንዴት እፈትሻለሁ?
Render የተደረገውን ገጽ ሳይሆን ጥሬውን HTML ይመልከቱ። የአሳሽ developer tools ስክሪፕቶች ከሠሩ በኋላ ያለውን DOM ያሳያሉ፣ ክሮውለር የሚያገኘው ግን ያ አይደለም። view-source ይጠቀሙ፣ ወይም ጥሬውን HTML ከcommand line ያስቀምጡ እና በውስጡ ይፈልጉ፦
curl -s -o page.html \
-A "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbot" \
https://example.com/page
# Is a sentence from your main text in the raw HTML?
grep -c "a sentence from your main content" page.html ውጤቱ 0 ከሆነ ዓረፍተ ነገሩ አገልጋዩ በላከው HTML ውስጥ የለም ማለት ነው፣ ስለዚህ ስክሪፕቶችን የማያስኬዱ ክሮውለሮች አያገኙትም። ፋይሉን በፍጥነት መመልከት ቀሪውን ይነግርዎታል፦ በአገልጋይ render የተደረገ ጽሑፍ ሙሉ ጽሑፉ እዚያ አለው፤ client-side shell ግን ባዶ root element እና የስክሪፕቶች ዝርዝር ብቻ አለው።
የትኞቹ ገጾች የበለጠ አደጋ ላይ ናቸው?
- በReact፣ Vue፣ Angular ወይም Svelte የተገነቡ እና ሁሉንም ነገር በአሳሽ ውስጥ render የሚያደርጉ single-page መተግበሪያዎች።
- ከተጫኑ በኋላ ዋና ጽሑፋቸውን ከAPI የሚያመጡ ገጾች፣ ለምሳሌ የምርት ዝርዝሮች፣ ዋጋዎች ወይም ግምገማዎች።
- ሲጫኑ ብቻ የሚጠየቅ፣ በtabs፣ በaccordions ወይም በ"ተጨማሪ ጫን" ክፍሎች ውስጥ ያለ ይዘት።
- ክሮውለሩ ሊያልፈው ከማይችለው መግቢያ፣ paywall ወይም የፈቃድ ግድግዳ በስተጀርባ ያሉ ገጾች።
noindexን ወይም canonical URLን በJavaScript ብቻ የሚያዘጋጁ ገጾች። Google በመጀመሪያው HTML ውስጥnoindexሲያይ renderingን ሙሉ በሙሉ ሊዘልለው እንደሚችል ያስጠነቅቃል።
በJavaScript ብቻ ያለ ይዘትን እንዴት አስተካክላለሁ?
ማስተካከያው አስፈላጊውን ይዘት በመጀመሪያው ምላሽ መላክ ነው። የቴክኖሎጂ ስብስብዎ የሚፈቅደውን ቀላሉን አማራጭ ይምረጡ፦
- Server-side rendering (SSR)፦ እንደ Next.js፣ Nuxt፣ SvelteKit እና Angular SSR ያሉ frameworks ገጹን በአገልጋይ ላይ render አድርገው በአሳሽ ውስጥ hydrate ያደርጉታል።
- Static generation ወይም prerendering፦ እንደ ጽሑፎች፣ ሰነዶች እና landing ገጾች ላሉ አልፎ አልፎ ለሚቀየሩ ገጾች HTMLን በdeploy ጊዜ ይገንቡ።
- Progressive enhancement፦ ጽሑፉን፣ ርዕሶችን፣ አገናኞችን፣ ዋጋዎችን እና JSON-LDን በHTML ውስጥ ያስቀምጡ፣ JavaScriptን ለመስተጋብር ብቻ ይጠቀሙ።
- አስፈላጊውን በHTML ውስጥ ያካትቱ፦ tabs ይዘትን የሚደብቁ ከሆነ፣ ሲጫኑ ከማምጣት ይልቅ ሁሉንም በHTML ውስጥ አስቀምጠው መታየቱን በCSS ወይም በስክሪፕት ይቀያይሩ።
ሙሉውን መተግበሪያ በአንድ ጊዜ መቀየር የለብዎትም። እንዲጠቀሱ ከሚፈልጓቸው ገጾች ይጀምሩ፦ ጽሑፎች፣ ሰነዶች፣ የምርት እና የዋጋ ገጾች። የመለያ ክፍሎች እና ዳሽቦርዶች client-side ሆነው መቆየት ይችላሉ፣ ምክንያቱም ለማንኛውም ከመግቢያ በስተጀርባ ናቸው።
በuser agent ላይ ተመስርተው ለክሮውለሮች ከተጠቃሚዎች የተለየ ገጽ ከማቅረብ ይቆጠቡ። ለሁሉም አንድ ዓይነት HTML render ማድረግ ለመጠበቅ ቀላል ነው፣ ስለ cloaking የሚነሳ ጥርጣሬንም ያስወግዳል።
የመግቢያ፣ የፈቃድ እና የpaywall ስክሪኖችም AI ክሮውለሮችን ያግዳሉ?
አዎ። ክሮውለር አይገባም፣ የcookie ባነርን አይጫንም፣ challengeዎችንም አይፈታም። Anthropic ቦቶቹ CAPTCHAዎችን ለማለፍ እንደማይሞክሩ ይገልጻል። የፈቃድ አስተዳዳሪ በHTML ውስጥ ገጹን በሙሉ ስክሪን ሽፋን ከተካው፣ ወይም ለመጀመሪያ ጊዜ የሚመጡ ጎብኚዎችን ወደ ፈቃድ ገጽ ካዘዋወረ፣ ክሮውለሩ በይዘትዎ ፋንታ ያንን ያገኛል።
የፈቃድ ሁኔታው ምንም ቢሆን ይፋዊ ገጾች ይዘታቸውን በHTML ውስጥ render ማድረጋቸውን ያረጋግጡ፣ ባነሩ ምትክ ሳይሆን ከላይ የሚደረብ ሽፋን ይሁን። እንዲጠቀሱ የሚፈልጓቸውን ገጾች ከመግቢያ ግድግዳዎች ውጭ ያድርጉ፣ ክሮውለር ወደ መግቢያ ገጽ እንደማይዘዋወርም ይፈትሹ።
AISeeWhy በJavaScript ብቻ የሚሠሩ ገጾችን እንዴት ያገኛል?
AISeeWhy የመጀመሪያውን HTML እያንዳንዱ ክሮውለር እንደሚቀበለው፣ ስክሪፕቶችን ሳያስኬድ፣ ያነባል። ገጹ የሚታይ ጽሑፍ ከሞላ ጎደል ሳይኖረው የframework root element እና ስክሪፕቶች ብቻ ሲኖሩት፣ ይዘቱ JavaScript ያስፈልገዋል የሚል P1 ግኝት ሪፖርት ያደርጋል። አሳሽ ከሚያገኘው ገጽ ውጭ ወደ ሌላ ቦታ ክሮውለሮችን የሚልኩ ማዘዋወሪያዎችንም ይጠቁማል።
ለዚህ ችግር ማስተካከያዎች
- ለAI ወኪሎች የMarkdown ስሪት የለም
- የገጹ ይዘት JavaScript ያስፈልገዋል
- ዋጋው በምልክት ማድረጊያው አለ እንጂ በገጹ ጽሑፍ የለም
- በምልክት ማድረጊያው ያለ ገጹ የማያሳየው ደረጃ
ቀጣይ እርምጃዎች
በዚህ ጽሑፍ ውስጥ ያሉ ክሮውለሮች
ተደጋግመው የሚጠየቁ ጥያቄዎች
Googlebot JavaScriptን render ያደርጋል?
አዎ። Google HTMLን crawl ያደርጋል፣ ገጾችን ለrendering ወረፋ ያስይዛል፣ ሀብት ሲፈቅድ ደግሞ በheadless Chromium render ያደርጋቸዋል። ያም ሆኖ Google server-side rendering ወይም prerenderingን ይመክራል።
የChatGPT፣ የClaude እና የPerplexity ክሮውለሮች JavaScriptን ያስኬዳሉ?
የአቅራቢዎቻቸው የክሮውለር ሰነድ እንዲህ አይልም። አቅራቢው ሌላ እስኪል ድረስ ክሮውለሩ የመጀመሪያውን HTML ያነባል ብለው ይገምቱ፣ ይዘትዎ በውስጡ መኖሩንም ያረጋግጡ።
ለቦቶች dynamic rendering ጥሩ ሐሳብ ነው?
እንደ ጊዜያዊ መፍትሔ ይሠራል፣ ግን የሚጠበቅ ሁለተኛ የrendering መንገድ ይጨምራል። Server-side rendering ወይም static HTML ለሁሉም አንድ ዓይነት ይዘት ያቀርባል፣ ለረጅም ጊዜም ቀላሉ መፍትሔ ነው።
በJavaScript የተጨመረ JSON-LD ይቆጠራል?
Google ከrendering በኋላ ሊያነበው ይችላል፣ ግን ስክሪፕቶችን የማያስኬዱ ክሮውለሮች አያዩትም። JSON-LDን በመጀመሪያው HTML ውስጥ ያስቀምጡ።
ምንጮች
- Google Search Central: የJavaScript SEO መሠረታዊ ነገሮች
- Apple: ስለ Applebot
- OpenAI: የOpenAI ክሮውለሮች አጠቃላይ እይታ
- Anthropic: Anthropic ከድር ውሂብ ይሰበስባል? የድረ-ገጽ ባለቤቶች ክሮውለሩን እንዴት ሊያግዱ ይችላሉ?
- Perplexity: የPerplexity ክሮውለሮች