Kurasa 2 zilikataa upitiaji

Jibu fupi

Kurasa hizi zilijibu 401, 403, 429 au 503, au muda uliisha, ukaguzi ulipozipakua kama kivinjari. Mara nyingi hiyo ni firewall, ulinzi dhidi ya bot au kikomo cha maombi badala ya ukurasa uliovunjika. Angalia kama crawler za utafutaji na za AI zinapata jibu hilohilo.

crawl.unreachable · Kipaumbele: P1–P3, kulingana na aina ya crawler

Maana yake

Kurasa hizi zilijibu 401, 403, 429 au 503, au muda uliisha. Firewall au kikomo cha maombi kinaweza kuwa kinazuia crawler pia; angalia kama crawler za utafutaji na za AI zinapata jibu hilohilo.

Kwa nini ni muhimu kwa utafutaji wa AI

Ukaguzi unapakua kurasa nyingi kwa muda mfupi kutoka seva moja, kwa hivyo kikomo cha maombi kinaweza kujibu 429 au 503 hata watu wakipata ukurasa. Sheria hiyohiyo ikitumika kwa crawler za utafutaji na za AI, kurasa hizi hazipakuliwi kwa index zao na haziwezi kunukuliwa kwenye majibu ya AI.

401 inamaanisha ukurasa unahitaji kuingia kwenye akaunti, jambo linalotarajiwa kwa maeneo ya akaunti lakini si kwa maudhui ya umma. 503 kwenye kila ukurasa inaweza kumaanisha hali ya matengenezo iliachwa ikiwa imewashwa. Kurasa hizi zinatenganishwa na viungo vilivyovunjika kwa sababu rekebisho linategemea nani anakataliwa.

Jinsi ya kurekebisha

  1. Fungua baadhi ya URL zilizoorodheshwa kwenye dirisha la faragha la kivinjari. Zikipakia, kuzuiwa kunalenga maombi ya kiotomatiki.
  2. Tafuta maombi yaliyokataliwa kwenye logi za firewall, CDN au hosting yako. Hakikisha crawler za utafutaji zilizothibitishwa kama Googlebot na Bingbot, na crawler za utafutaji wa AI unazotaka, zinaruhusiwa; CDN nyingi, ikiwemo Cloudflare, zina mpangilio wa verified bots.
  3. Kama kikomo cha maombi ndicho kilisababisha, ongeza kikomo kwa maombi ya kawaida ya kurasa au uache kurasa za HTML nje yake.
  4. Kama kurasa zinajibu 401, ondoa hitaji la kuingia kwenye kurasa za umma, au acha kuunganisha kurasa za faragha kutoka kurasa za umma.
  5. Endesha ukaguzi wa tovuti tena kutoka akaunti yako kuthibitisha matokeo.

Jinsi ya kuthibitisha rekebisho

Baada ya badiliko, bonyeza "Kagua tena" kwenye ripoti: inaorodhesha kilichorekebishwa na jinsi alama ilivyobadilika.

Kagua ukurasa wangu →

Dosari zote na jinsi alama inavyofanya kazi