GPTBot dobi nadomestno stran

Kratek odgovor

Pajek je dobil status 200, vendar ne prave strani. Njeno vidno besedilo obsega manj kot 15 % tistega, kar je dobil brskalnik, ali pa vsebuje frazo o blokadi, na primer „access denied“ ali „are you a robot“, ki je v strani za brskalnik ni. Poiščite pravilo za bote, ki streže to nadomestno stran, in pajku pokažite celotno stran.

access.soft_block · Prioriteta: P1–P3, glede na vrsto pajka

Kaj pomeni

Zahteva z user agentom GPTBot je dobila status 200, vendar je besedilo strani obvestilo o blokadi ali je precej krajše od tistega, ki ga dobi brskalnik.

Zakaj je to pomembno za iskanje z UI

Mehko blokado je težje opaziti kot napako 403, ker dnevniki in nadzor delovanja kažejo 200. Pajek shrani besedilo, ki ga je prejel, zato lahko iskalnik odgovorov indeksira stran z besedilom „omogočite JavaScript in piškotke“ namesto vaše vsebine ali pa stran zavrže kot prazno.

Preverjanje se izvede le, če ima različica za brskalnik vsaj 200 znakov besedila. Oba odgovora sta prenesena z istega strežnika v razmiku nekaj trenutkov, zato velika razlika v besedilu izhaja iz tega, kako vaš sistem obravnava user agent pajka, in ne iz omrežja ali spremembe vsebine.

Kako to popraviti

  1. Dolžino besedila in najdeno frazo v dokazih poročila primerjajte z različico za brskalnik. Poročilo AISeeWhy pokaže dokaze in popravek, pripravljen za lepljenje; nato zaženite „Preveri znova“, da potrdite rezultat.
  2. Poiščite funkcije za upravljanje botov, ki namesto napake odgovorijo z vmesno stranjo: Cloudflarove strani z izzivom ali zaznavanjem JavaScripta, strani za bote Imperve in Akamaija ali vtičnik „preverite, da ste človek“.
  3. Preverite dinamično upodabljanje ali pravila predpomnilnika, ki botom strežejo drugo predlogo, ter orodja za A/B-testiranje ali geolokacijo, ki neznanim obiskovalcem zamenjajo stran.
  4. V pravilu, ki streže nadomestno stran, dodajte izjemo za pajka, preverjeno z obsegom IP ali obratnim DNS, kjer to vaša platforma podpira.

Kako potrditi popravek

Po spremembi v poročilu pritisnite »Preveri znova«: pokaže, kaj je odpravljeno in kako se je spremenila ocena.

Preveri mojo stran →

Sorodni vodniki

Vse ugotovitve in kako deluje ocena