Miks minu sait Perplexitys ei kuvata?
Uuri umbes 30 sekundiga, kas PerplexityBot jõuab sinu lehele, ja milline blokeering (robots.txt, tulemüür või JavaScript) hoiab sind tema vastustest eemal.
Tasuta · Registreerumata · Tulemus 30 sekundiga
robots.txt PerplexityBot'i jaoks
Grupp, mis kehtib PerplexityBot-ile, loetakse RFC 9309 reeglite järgi ning otsustav rida kuvatakse.
Tulemüüri ja CDN-i blokeeringud
403, 429 või kontrollleht, mille saavad ainult robotid, märgitakse ning vastanud tulemüür nimetatakse.
Mida leht tagastab
Roboti saadud olekut, suurust ja ümbersuunamisi võrreldakse tavalise brauseri omadega, nii et robotitele antav kehvem vastus paistab silma.
Lahendus igale leiule
Iga leiuga kaasneb muudatus, mida teha. Tasuta kontroll näitab sinu skoori ja esimest leidu; täisraport maksab $29, ühekordselt.
Perplexity saab näidata ja linkida ainult lehti, mida PerplexityBot tohib roomata ja mis talle päriselt kätte jõuavad. Tavalised põhjused on robots.txt reegel, mis keelab PerplexityBot-i, tulemüür või CDN, mis vastab talle veaga 403 või kontrollilehega, ning tekst, mis ilmub alles pärast JavaScripti käivitumist. Kontrolli kõiki kolme ja luba seejärel Perplexity avaldatud IP-vahemikud. Kui Perplexity viitab konkurendile, mitte sulle, välista kõigepealt need blokeeringud ja võrdle seejärel oma lehte lehega, millele ta sama küsimuse puhul viitab.
Leia blokeering 3 sammuga
- Kontrolli robots.txt-i
Otsi gruppi, mis nimetab
PerplexityBot-i. Kui seda pole, kehtib gruppUser-agent: *, ja nimetatud grupp asendab*täielikult. - Võrdle brauserit ja robotit
Küsi lehte brauserina ja iga Perplexity agendina. 403, 429 või 503 ainult agentidele, leht
Just a moment...või palju väiksem 200 viitab tulemüürile. - Vaata lehe lähtekoodi
Lae leht
curl-iga ja otsi lauset oma põhisisust. Kui seda pole, lisavad teksti skriptid: renderda see serveris.
Korduma kippuvad küsimused
Miks Perplexity soovitab minu konkurenti, mitte mind?
Perplexity ei avalda, kuidas ta allikaid valib, kuid saab viidata ainult lehtedele, mida tema agendid lugeda suudavad. Kõigepealt veendu, et PerplexityBot ja Perplexity-User saavad sinu lehe kätte. Kui saavad, ava leht, millele Perplexity sama küsimuse puhul viitab, ja võrdle: kas sinu leht vastab täpselt sellele küsimusele kohe alguses, faktid tekstina kirjas? AISeeWhy nähtavuse kontroll tehisintellektis esitab sinu ostjate küsimused Perplexitys ja kolmes teises assistendis ning näitab, milliseid konkurente sinu kõrval nimetatakse.
Kas Perplexity treenib oma mudeleid minu sisu peal?
Perplexity ütleb, et PerplexityBot-i ei kasutata sisu roomamiseks AI alusmudelite jaoks ja et Perplexity-User ei kogu sisu treenimiseks. PerplexityBot-i keelamine ei toimi seega treeningust loobumisena; see vähendab ainult sinu nähtavust Perplexity otsingutulemustes.
Kui kiiresti märkab Perplexity, et parandasin robots.txt?
Perplexity ütleb, et robots.txt muudatuste kajastumiseks tema süsteemides võib kuluda kuni 24 tundi. Tulemüüri muudatused jõustuvad siis, kui sinu teenusepakkuja need rakendab, kuid anna robotile aega tagasi tulla, enne kui tulemust hindad.
Kas saan Perplexity-User-i robots.txt-ga blokeerida?
Mitte usaldusväärselt. Perplexity ütleb, et see laadija üldjuhul ignoreerib robots.txt-d, sest laadimist palus kasutaja. Kui pead selle peatama, on usaldusväärne vahend tulemüürireegel, mis sobitub tema avaldatud IP-vahemikega.
Kas user agent'i kontrollist piisab Perplexity liikluse tuvastamiseks?
Ei. User agent'it on lihtne kopeerida. Võrdle lähte-IP-d vahemikega, mille Perplexity avaldab failides perplexitybot.json ja perplexity-user.json, ning sobita tulemüürireeglites nii user agent kui ka IP.
Loe kogu juhendit
Küsid Perplexitylt oma toote kohta ja see viitab konkurendile, arvustuste saidile või foorumilõimele, aga mitte kunagi sinu enda lehtedele. Mõnikord on see asjakohasuse küsimus. Sageli on see tehniline takistus, mille leiad mõne minutiga. Perplexity dokumenteerib, milliseid agente ta kasutab, mida igaüks teeb ja kust tema liiklus tuleb, seega saab iga ahela lüli üle kontrollida: robots.txt, vastus, mille sinu server saadab, ja see, mida vastus sisaldab.
Kuidas Perplexity lehti leiab ja loeb?
Perplexity dokumenteerib kaks agenti. Neil on erinevad ülesanded ja probleem kummagagi võib sinu lehe vastusest välja jätta.
PerplexityBoton mõeldud veebisaitide näitamiseks ja linkimiseks Perplexity otsingutulemustes. Perplexity soovitab selle robots.txt-s lubada, kui soovid seal näha olla, ja ütleb, et seda ei kasutata sisu roomamiseks AI alusmudelite jaoks.Perplexity-Usertoetab kasutajate tegevusi. Kui keegi esitab küsimuse, võib see külastada lehte, et aidata vastata, ja lingib sellele lehele. Perplexity ütleb, et seda ei kasutata veebi roomamiseks ega treeningandmete kogumiseks.
Praktikas otsustab PerplexityBot, kas Perplexity teab sinu lehtedest juba enne, kui keegi küsib, ja Perplexity-User otsustab, kas ta saab lehe vajadusel kohe avada. Kui soovid, et sulle viidataks, peaksid mõlemad saama sama lehe, mille saab brauser.
Kas sinu robots.txt blokeerib PerplexityBot-i?
Ava https://yourdomain.com/robots.txt ja otsi gruppi, mis nimetab PerplexityBot-i. Kui sellist pole, järgib robot gruppi User-agent: *. RFC 9309 järgi ei sõltu sobitamine suur- ja väiketähtedest ning nimega grupp asendab * grupi täielikult, mitte ei lisandu sellele.
See blokeering on levinud. Meie uuringus, mis vaatas 1000 populaarseima domeeni robots.txt faile, keelas 518-st robots.txt-d serveerinud saidist 86 (16,6%) avalehe PerplexityBot-ile. See oli suurim osakaal kõigi testitud AI-otsingurobotite seas; OAI-SearchBot oli blokeeritud 58 saidil (11,2%). Osa neist saitidest võis tahta peatada AI treenimist, kuid Perplexity ütleb, et PerplexityBot pole treeningrobot, seega maksab selle blokeerimine otsingunähtavusega, ilma et see eesmärki teeniks.
Seadistus, mis laseb Perplexity sisse ja hoiab privaatse ala suletuna, näeb välja selline:
User-agent: PerplexityBot
Allow: /
Disallow: /account/
User-agent: *
Allow: /
Disallow: /account/
Sitemap: https://example.com/sitemap.xml Kontrolli ka, et fail ise vastab õigesti. Kui robots.txt tagastab serveri vea, peab robot RFC 9309 järgi eeldama, et kogu sait on keelatud. robots.txt aadress, mis tagastab HTML-lehe olekukoodiga 200, ei sisalda ühtegi kehtivat reeglit. Perplexity ütleb, et muudatuste jõustumiseks võib kuluda kuni 24 tundi.
Kas sinu tulemüür või CDN blokeerib Perplexityt?
robots.txt on palve, mitte juurdepääsukontroll. Sinu tulemüür, CDN või robotikaitse otsustab, mida tegelikult tagasi saadetakse, ja see võib vastata Perplexityle veaga 403, 429 või kontrollilehega, samal ajal kui sinu enda brauseri külastused paistavad tavalised. Perplexity dokumentatsioon ütleb, et veebirakenduse tulemüüri taga olevad saidid võivad pidada tema robotid eraldi lubama.
Testi seda, küsides sama URL-i brauserina ja iga Perplexity agendina, ning võrdle olekukoodi ja suurust:
for UA in "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36" \
"Mozilla/5.0 (compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot)" \
"Mozilla/5.0 (compatible; Perplexity-User/1.0; +https://perplexity.ai/perplexity-user)"; do
curl -s -o /dev/null -w "%{http_code} %{size_download}\n" -A "$UA" https://example.com/page
done 403, 429 või 503 ainult Perplexity agentidele, leht pealkirjaga Just a moment... või 200-vastus, mis on brauseri omast palju väiksem, viitavad kõik tulemüürile. See test tuleb sinu IP-aadressilt, mitte Perplexity omalt, seega näitab see, kuidas sinu reeglid user agent'isse suhtuvad; IP-põhised reeglid võivad päris robotit siiski teisiti kohelda.
Kui kasutad Cloudflare'i, pane tähele kahte asja. Perplexity dokumentatsioon kordab Cloudflare'i enda väidet, et Bot Fight Mode'i ei saa WAF-i kohandatud reeglitega vahele jätta, seega kui see funktsioon Perplexityt kontrollib, ei aita lubav reegel. Lisaks teatas Cloudflare 2025. aasta augustis, et eemaldas Perplexity kinnitatud robotite loendist, kuna oli täheldanud tema sõnul deklareerimata roomamist; Perplexity vaidlustas selle kirjelduse. Reeglid, mis lasevad läbi ainult kinnitatud robotid, ei pruugi seega Perplexityt hõlmata. Kontrolli praegust olekut oma juhtpaneelil, selle asemel et midagi eeldada.
Kuidas lubada Perplexity tema avaldatud IP-vahemike järgi?
Igaüks võib saata päringu, mis väidab end olevat PerplexityBot, seega laseb ainult user agent'i järgi sobituv lubav reegel sisse ka jäljendajad. Perplexity avaldab mõlema agendi aadressivahemikud ja soovitab sobitada user agent'i ja IP-aadressi koos:
curl -s https://www.perplexity.ai/perplexitybot.json | jq -r '.prefixes[] | .ipv4Prefix // .ipv6Prefix'
curl -s https://www.perplexity.ai/perplexity-user.json | jq -r '.prefixes[] | .ipv4Prefix // .ipv6Prefix' Perplexity ütleb, et neid loendeid uuendatakse regulaarselt, ja soovitab WAF-i reeglite uuendamise automatiseerida. Paiguta lubav reegel kõigist päringuid blokeerivatest või kontrollivatest reeglitest ettepoole: Cloudflare'i kohandatud reeglites esimeseks või AWS WAF-is madalama prioriteedinumbriga. Seejärel jälgi oma logisid, sest tulemüüri muudatuste levimine võib aega võtta.
Kas JavaScripti renderdamine võib takistada Perplexityl lehte lugemast?
Võib küll. Perplexity robotite dokumentatsioon ei ütle, kas tema agendid JavaScripti käivitavad, seega on kindel eeldada, et robotile vajalik tekst peab olema serveri saadetavas HTML-is. Täielikult brauseris ehitatud lehed, näiteks ilma serveripoolse renderdamiseta üheleherakendused, võivad jõuda kohale tühja kestana, kus keerleb laadimisikoon.
Kiire kontroll on laadida leht curl-iga ja otsida väljundist lauset oma põhisisust. Kui seda seal pole, lisavad teksti skriptid. Serveripoolne renderdamine, staatiline genereerimine või robotite jaoks eelrenderdamine parandab selle korraga kõigi AI-robotite jaoks, mitte ainult Perplexity puhul.
Mis siis, kui kõik on avatud, aga mu sait ikka ei ilmu?
Loetavus on eeltingimus, mitte garantii. Perplexity ei avalda, kuidas ta tsiteeritavaid allikaid valib, seega võib leht, mida iga agent loeb, ikkagi kaotada lehtedele, mis vastavad küsimusele otsesemalt. Sinu kontrolli all on see, et miski tehniline ei jääks ette: selge lehe pealkiri, vastus teksti alguses ja täpsed faktid, mis klapivad sellega, mida mujal ütled.
Pea meeles ka seda, mida robots.txt ei hõlma. Perplexity ütleb, et Perplexity-User üldjuhul ignoreerib robots.txt-d, sest laadimist palus kasutaja. Reegel Perplexity-User-ile pole seega usaldusväärne viis otsekülastusi blokeerida ja robots.txt, mis seda lubab, ei tõesta, et see sinu tulemüürist läbi pääseb.
AISeeWhy küsib sinu lehte PerplexityBot-ina, Perplexity-User-ina ja 12 muu robotina brauseri kõrval, rakendab iga roboti jaoks sinu robots.txt reegleid, tunneb ära kontrollilehed ja näitab, kui suur osa tekstist jõuab kohale ilma JavaScriptita, nii et näed, milline ahela lüli ei tööta.
Järgmised sammud
- robots.txt testija ja kontrollija AI-robotitele
- AI-robotite IP kontroll
- Vaadake täieliku raporti näidet
- AI-robotite jälgimine
- Paketid ja hinnad
Selles artiklis olevad robotid
Allikad
- Perplexity: Perplexity crawlers
- RFC 9309: Robots Exclusion Protocol
- Cloudflare: Bot Fight Mode
- Cloudflare: Perplexity is using stealth, undeclared crawlers to evade website no-crawl directives
- Perplexity: Agents or bots? Making sense of AI on the open web
- AISeeWhy: AI Crawler Access Report, 2026-11