OAI-SearchBot ታግዷል

አጭር መልስ

በዚህ ክሮውለር user agent የተላከ ጥያቄ ውድቅ ተደርጓል፦ የ4xx ወይም 5xx ሁኔታ፣ የCloudflare cf-mitigated header ወይም የchallenge ገጽ አግኝቷል፣ መደበኛ የአሳሽ ጥያቄ ግን ገጹን አግኝቷል። ከuser agentው ጋር የሚዛመደውን የፋየርዎል፣ የCDN ወይም የቦት ደንብ ፈልገው ክሮውለሩን ያሳልፉ።

access.blocked · ቅድሚያ: P1–P3፣ በክሮውለር ዓይነት

ምን ማለት ነው

በOAI-SearchBot user agent የተላከ ጥያቄ ሁኔታ 403 ወይም የchallenge ገጽ አገኘ፣ አሳሽ ግን ገጹን አገኘ። ያልተረጋገጠ IP ተፈትሿል፦ ይህ ፋየርዎልዎ ይህን user agent እንዴት እንደሚያስተናግድ ያሳያል፤ ከተረጋገጡ IPዎቹ የሚመጣው እውነተኛው ክሮውለር በተለየ መንገድ ሊስተናገድ ይችላል።

ለAI ፍለጋ ለምን አስፈላጊ ነው

እንደ OAI-SearchBot፣ ChatGPT-User፣ Claude-SearchBot፣ Claude-User፣ PerplexityBot እና Perplexity-User ያሉ የፍለጋ እና የተጠቃሚ ክሮውለሮች መልሶችን እና ከሥራቸው ያሉትን አገናኞች ለመገንባት ገጾችን ያመጣሉ። 403 ወይም የchallenge ገጽ ካገኙ ገጹ የቱንም ያህል ጥሩ ቢሆን ሊጠቀስ ወይም ሊገናኝ አይችልም። AISeeWhy የእነዚህን ክሮውለሮች እገዳ P1 ብሎ የሚመድበው ለዚህ ነው።

የስልጠና ክሮውለሮች (GPTBot፣ ClaudeBot፣ CCBot፣ Bytespider፣ Meta-ExternalAgent) P3 ተብለው ይመደባሉ፦ እነሱን ማገድ የፖሊሲ ምርጫ እንጂ ስህተት አይደለም። ሙከራው የሚካሄደው ካልተረጋገጠ IP ነው፣ ስለዚህ ደንቦችዎ user agentውን እንዴት እንደሚያስተናግዱ ያሳያል፤ ከታተሙት የIP ክልሎቹ የሚመጣው እውነተኛው ክሮውለር በተለየ መንገድ ሊስተናገድ ይችላል።

እንዴት እንደሚስተካከል

  1. የትኛው ክሮውለር እንደታገደ፣ ያገኘውን ሁኔታ እና ኦዲቱ የለየውን WAF ለማየት ግኝቱን ይክፈቱ። የAISeeWhy ሪፖርቱ ማስረጃውን እና ለመለጠፍ ዝግጁ ማስተካከያ ያሳያል፤ ከዚያ ውጤቱን ለማረጋገጥ "እንደገና ይፈትሹ"ን ያካሂዱ።
  2. በCloudflare ላይ የታገደውን ጥያቄ በSecurity → Events ውስጥ ይመልከቱ፣ ከዚያ ክሮውለሩን የሚያዛምድ (verified bots ወይም የuser agent tokenኑ) የWAF custom rule ይጨምሩ፤ እርምጃው ለቀሪዎቹ custom rules፣ ለSuper Bot Fight Mode እና ለrate limiting Skip ይሁን። በAI Crawl Control ውስጥ ክሮውለሩን Allow ያድርጉት።
  3. በVercel፣ Akamai፣ Imperva፣ Sucuri ወይም AWS WAF ላይ የተቀሰቀሰውን የbot management ወይም managed rule ፈልገው ለክሮውለሩ ልዩ ፍቃድ (exception) ይጨምሩ፤ ቢቻል በuser agent ብቻ ሳይሆን በአቅራቢው በታተሙ የIP ክልሎች ወይም በreverse DNS የተረጋገጠ ይሁን።
  4. በnginx ወይም Apache ላይ ክሮውለሩን የሚጠቅሱ deny፣ return 403 ወይም RewriteCond %{HTTP_USER_AGENT} መስመሮችን በconfig ውስጥ ይፈልጉ፣ በWordPress ደግሞ "መጥፎ ቦቶችን" የሚያግዱ የደህንነት plugins ይፈትሹ።
  5. ለእያንዳንዱ ክሮውለር በተናጠል ይወስኑ፦ ገጾች እንዲጠቀሱ የሚያደርገው የፍለጋ እና የተጠቃሚ ክሮውለሮችን መፍቀድ ነው፣ የስልጠና ክሮውለሮች ግን ፖሊሲዎ ይህ ከሆነ ታግደው ሊቆዩ ይችላሉ።

ምሳሌ

(cf.client.bot) or (http.user_agent contains "OAI-SearchBot")
Action: Skip -> All remaining custom rules, Super Bot Fight Mode, Rate limiting

ማስተካከያውን እንዴት ማረጋገጥ እንደሚቻል

ከለውጡ በኋላ በሪፖርቱ ላይ “እንደገና ይፈትሹ”ን ይጫኑ፦ ምን እንደተስተካከለ እና ውጤቱ እንዴት እንደተቀየረ ይዘረዝራል።

ገጽዎን ይፈትሹ →

ተዛማጅ መመሪያዎች

ሁሉም ግኝቶች እና ውጤቱ እንዴት እንደሚሠራ