ስንት ድረ-ገጾች llms.txt ያትማሉ? 10,000 ዶሜኖችን ፈትሸናል
ከ10,000 ታዋቂ ዶሜኖች ውስጥ 12.4% (1,240) llms.txt ያትማሉ፤ መነሻ ገጻቸው በHTML ከሚመልሱት መካከል ደግሞ 16.7% ያትማሉ። ትልልቅ ድረ-ገጾች ብዙ ጊዜ ያትማሉ። llms.txt የሚያትሙ ድረ-ገጾች የAI የፍለጋ ክራውለሮችን የሚከለክሉት በ1.4% ሲሆን፣ የማያትሙት ደግሞ በ15.0% ይከለክላሉ። ይህ ቆጠራ ህትመትን ብቻ የሚለካ ነው፤ ማንኛውም የAI ረዳት ፋይሉን እንደሚያነብ አያሳይም።
llms.txt በAI ፍለጋ ዙሪያ ብዙ ከሚነገርላቸው ፋይሎች አንዱ ሲሆን፣ በጣም ጥቂት ከተለኩትም አንዱ ነው። የ10,000 ከፍተኛ ዶሜኖችን robots.txt አስቀድመን አንብበናል፤ በዚያው ዙር እያንዳንዳቸውን /llms.txt ጠይቀናል። የተገኘው ውጤት ይህ ነው።
እንዴት ፈተሽን?
ከTranco ዝርዝር (የዝርዝር መታወቂያ JZWZY) ከፍተኛዎቹን 10,000 ዶሜኖች ወስደን፣ መነሻ ገጹን አንብበን ወደ ዋናው ሆስት የሚወስደውን ማዘዋወሪያ ከተከተልን በኋላ፣ ህዳር 21 ቀን 2026 በAISeeWhy የራሱ user agent ከእያንዳንዳቸው /llms.txt አንድ ጊዜ ጠይቀናል።
አንድ ዶሜን llms.txt እንደሚያትም የሚቆጠረው /llms.txt ራሱ በ200 ሲመልስ፣ ባዶ ያልሆነና HTML ገጽ ያልሆነ የጽሑፍ ይዘት ሲኖረው፣ እንዲሁም እንደ መግቢያ ገጽ ወይም መነሻ ገጽ ወዳለ ሌላ ገጽ ማዘዋወር ከሌለ ነው። በዚህ ዙር የፋይሉን ቅርጸት አልፈተሽንም።
ምን አገኘን?
- ከ10,000 ዶሜኖች ውስጥ 1,240 (12.4%)
llms.txtያትማሉ። - ዝርዝሩ ድረ-ገጽ የማያገለግሉ CDNዎችንና የAPI ሆስቶችን ያካትታል። መነሻ ገጻቸው በHTML ከመለሱት 7,367 ዶሜኖች መካከል 1,233 (16.7%) ያትማሉ።
- ከሞላ ጎደል ሁሉም robots.txt ያገለግላሉ፤ ከ1,240 ውስጥ 1,229 ናቸው።
ትልልቅ ድረ-ገጾች የበለጠ ያትማሉ?
አዎ፤ በግልጽ ልዩነት። ድረ-ገጾችን (መነሻ ገጻቸው በHTML የመለሱ ዶሜኖችን) በTranco ደረጃ ከፋፍለናል፦
- ከ1 እስከ 1,000 ያሉ ደረጃዎች፦ 22.6% llms.txt ያትማሉ (ከ658 ድረ-ገጾች 149)።
- ከ1,001 እስከ 3,000 ያሉ ደረጃዎች፦ 18.2% (ከ1,449 ውስጥ 264)።
- ከ3,001 እስከ 10,000 ያሉ ደረጃዎች፦ 15.6% (ከ5,260 ውስጥ 820)።
እነማን ያትማሉ?
robots.txt ከሚያገለግሉት 6,192 ዶሜኖች መካከል፣ llms.txt የሚያትሙት ከቀሪዎቹ የተለዩ ሆነው ይታያሉ፦
- ቢያንስ አንድ የAI ማሰልጠኛ ክራውለር የሚከለክሉት በ11.8% ሲሆን፣ llms.txt ለሌላቸው ዶሜኖች ደግሞ 26.0% ነው።
- ቢያንስ አንድ የAI ፍለጋ ወይም የተጠቃሚ ክራውለር የሚከለክሉት በ1.4% ሲሆን፣ ለሌሎች 15.0% ነው።
Content-Signalመስመር የሚጠቀሙት በ12.9% ሲሆን፣ ለሌሎች 4.9% ነው።
በሌላ አነጋገር፣ llms.txt ለማተም የሚተጉ ድረ-ገጾች በአብዛኛው የAI ክራውለሮችን አስቀድመው የሚቀበሉ ናቸው።
ይህ ምን አያሳይም?
ይህ ግንኙነትን እንጂ መንስኤን አያሳይም። ለAI ታይነት ትኩረት የሚሰጥ ድረ-ገጽ llms.txt ሊያትምና robots.txt ክፍት ሊያደርግ ይችላል፤ ይህ ማለት ግን ልዩነቱን የፈጠረው ፋይሉ ነው ማለት አይደለም። ቆጠራው የሚለካው ህትመትን ብቻ ነው። ማንኛውም የAI ረዳት ፋይሉን እንደሚያነብ አያሳይም፤ ዋናዎቹ የAI ፍለጋ ክራውለሮችም እንደሚጠቀሙበት አይናገሩም።
ቁጥሮቹ የሚገልጹት ለታዋቂዎቹ ዶሜኖች በአንድ ቀን፣ በአንድ አድራሻ ላይ የተገኙትን የመነሻ ገጽ ደንቦችና ፋይል ነው። ትናንሽ ድረ-ገጾች የተለየ ሊመስሉ ይችላሉ።
ማተም አለብዎት?
ርካሽና ጉዳት የሌለው ነው፦ ስለ ድረ-ገጽዎ አጭር የMarkdown ማጠቃለያና በጣም ጠቃሚ የሆኑ ገጾችዎ ዝርዝር ነው። ትክክለኛ ያድርጉት፤ አገናኞቹም እንዲሰሩ ያድርጉ። ክራውለሮችን ከመቀበል እንደ ምትክ አይቁጠሩት፤ ፋየርዎሉ ክራውለሩን በሚከለክልበት ወይም robots.txt በሚከለክለው ድረ-ገጽ ላይ ያለ llms.txt ለማንም አይጠቅምም።
ቀጣይ እርምጃዎች
- robots.txt tester እና ፈታሽ ለAI ክሮውለሮች
- የllms.txt ፈታሽ እና አረጋጋጭ
- የሙሉ ሪፖርት ምሳሌ ይመልከቱ
- የAI ክሮውለር ክትትል
- እቅዶች እና ዋጋዎች
ተደጋግመው የሚጠየቁ ጥያቄዎች
ስንት በመቶ ድረ-ገጾች llms.txt አላቸው?
ከፈተሽናቸው 10,000 ታዋቂ ዶሜኖች መካከል 12.4% ያትማሉ። መነሻ ገጻቸው በHTML ከሚመልሱት ዶሜኖች መካከል ድርሻው 16.7% ነው፤ ለታላላቆቹ ድረ-ገጾች ደግሞ ከፍ ይላል፦ በመጀመሪያዎቹ 1,000 ውስጥ 22.6%።
llms.txt ያላቸው ድረ-ገጾች የAI ክራውለሮችን ብዙ ጊዜ ይፈቅዳሉ?
በመረጃችን መሠረት አዎ፦ የAI ፍለጋና የተጠቃሚ ክራውለሮችን የሚከለክሉት በ1.4% ሲሆን፣ ፋይሉ ለሌላቸው ድረ-ገጾች 15.0% ነው። ይህ ተዛማጅነት ነው። ፋይሉ ክራውለሮች ድረ-ገጽን የሚያዩበትን መንገድ እንደሚቀይር አያሳይም።
llms.txt በAI ረዳቶች እንድጠቀስ ይረዳኛል?
መረጃችን ሊናገር አይችልም። የሚቆጥረው ፋይሉን የሚያትሙ ድረ-ገጾችን እንጂ ረዳት መጠቀሙን አይደለም፤ ዋናዎቹ የAI ፍለጋ ክራውለሮችም እንደሚያነቡት አይገልጹም። ሊሰበሰቡ የሚችሉ ገጾችና ክፍት መዳረሻ የበለጠ ይጠቅማሉ።
አንድ ድረ-ገጽ እውነተኛ llms.txt እንዳለው እንዴት ይታወቃል?
/llms.txt ይጠይቁና በዚያው አድራሻ በ200 እንደሚመልስ፣ ይዘቱም HTML ገጽ ያልሆነ ጽሑፍ እንደሆነ ያረጋግጡ። ወደ መነሻ ገጽ ወይም ወደ መግቢያ ገጽ ማዘዋወር llms.txt አይደለም።
ምንጮች
- llmstxt.org: የ/llms.txt ፋይል
- AISeeWhy: የAI ክራውለር መዳረሻ ሪፖርት፣ 2026-11
- Tranco: ለምርምር ተኮር የከፍተኛ ድረ-ገጾች ደረጃ
- Google Search Central: የAI ባህሪያትና ድረ-ገጽዎ
- OpenAI: የOpenAI ክራውለሮች አጠቃላይ እይታ