Kwa nini tovuti yangu haionekani kwenye Perplexity?
Jua ndani ya sekunde 30 hivi kama PerplexityBot inaweza kufikia ukurasa wako, na ni kizuizi kipi (robots.txt, firewall au JavaScript) kinachokuweka nje ya majibu yake.
Bure · Bila kujisajili · Matokeo kwa sekunde 30
robots.txt ya PerplexityBot
Kundi linalotumika kwa PerplexityBot husomwa kwa kanuni za RFC 9309, na mstari unaoamua huonyeshwa.
Vizuizi vya firewall na CDN
403, 429 au ukurasa wa changamoto unaopokelewa na crawler pekee huwekewa alama, na firewall iliyojibu hutajwa jina.
Ukurasa unarudisha nini
Hali, ukubwa na uelekezaji upya kwa crawler hulinganishwa na vya kivinjari cha kawaida, hivyo jibu dogo zaidi kwa crawler hujitokeza wazi.
Suluhisho kwa kila tatizo
Kila tatizo linakuja na mabadiliko ya kufanya. Ukaguzi wa bure unaonyesha alama yako na tatizo la kwanza; ripoti kamili ni $29, mara moja tu.
Perplexity inaweza kuonyesha na kuunganisha tu kurasa ambazo PerplexityBot inaruhusiwa kuzipitia na inazipokea kweli. Sababu za kawaida ni sheria ya robots.txt inayozuia PerplexityBot, firewall au CDN inayoijibu kwa 403 au ukurasa wa changamoto, na maandishi yanayoonekana tu baada ya JavaScript kuendeshwa. Kagua yote matatu, kisha ruhusu masafa ya IP ambayo Perplexity imechapisha. Kama Perplexity inanukuu mshindani na si wewe, ondoa kwanza vizuizi hivi, kisha linganisha ukurasa wako na ukurasa inaounukuu kwa swali hilohilo.
Tafuta kizuizi kwa hatua 3
- Kagua robots.txt
Tafuta kundi linalotaja
PerplexityBot. Kama halipo, kundi laUser-agent: *linatumika, na kundi lenye jina hubadilisha*kabisa. - Linganisha kivinjari na crawler
Omba ukurasa kama kivinjari na kama kila wakala wa Perplexity. 403, 429 au 503 kwa mawakala pekee, ukurasa wa
Just a moment..., au 200 ndogo zaidi kwa kiasi kikubwa unaonyesha firewall. - Angalia chanzo cha ukurasa
Pakua ukurasa kwa
curlna utafute sentensi kutoka maudhui yako makuu. Isipopatikana, script ndizo zinaongeza maandishi: yatengeneze kwenye seva.
Maswali yanayoulizwa mara kwa mara
Kwa nini Perplexity inapendekeza mshindani wangu na si mimi?
Perplexity haichapishi jinsi inavyochagua vyanzo, lakini inaweza kunukuu tu kurasa ambazo mawakala wake wanaweza kusoma. Kwanza hakikisha kwamba PerplexityBot na Perplexity-User zinapokea ukurasa wako. Kama zinaupokea, fungua ukurasa ambao Perplexity inanukuu kwa swali hilohilo na ulinganishe: je, wako unajibu swali hilo hasa karibu na juu, ukweli ukiwa umeelezwa katika maandishi? Ukaguzi wa Mwonekano kwenye AI wa AISeeWhy unauliza maswali ya wanunuzi wako katika Perplexity na wasaidizi wengine watatu na unaonyesha washindani wapi wanatajwa kando yako.
Je, Perplexity hufunza miundo yake kwa maudhui yangu?
Perplexity inasema PerplexityBot haitumiki kupitia maudhui kwa ajili ya miundo ya msingi ya AI na kwamba Perplexity-User haikusanyi maudhui kwa ajili ya mafunzo. Kwa hivyo kuzuia PerplexityBot si njia ya kujiondoa kwenye mafunzo; kunapunguza tu kuonekana kwako katika matokeo ya utafutaji ya Perplexity.
Baada ya kurekebisha robots.txt, Perplexity itagundua baada ya muda gani?
Perplexity inasema mifumo yake inaweza kuchukua hadi saa 24 kuakisi mabadiliko ya robots.txt. Mabadiliko ya firewall yanaanza kufanya kazi mtoa huduma wako anapoyatekeleza, lakini ipe crawler muda wa kurudi kabla ya kutathmini matokeo.
Je, ninaweza kuzuia Perplexity-User kwa robots.txt?
Si kwa uhakika. Perplexity inasema kwa kawaida mpakuaji huyu hupuuza robots.txt kwa sababu mtumiaji ndiye aliyeomba upakuaji. Ukihitaji kumzuia, sheria ya firewall inayolinganishwa na masafa yake ya IP yaliyochapishwa ndiyo udhibiti wa kutegemewa.
Je, kukagua user agent kunatosha kutambua trafiki ya Perplexity?
Hapana. User agent ni rahisi kunakili. Linganisha IP ya chanzo na masafa ambayo Perplexity huchapisha katika perplexitybot.json na perplexity-user.json, na ulinganishe user agent na IP pamoja katika sheria za firewall.
Soma mwongozo kamili
Unauliza Perplexity kuhusu bidhaa yako, nayo inanukuu mshindani, tovuti ya maoni au mjadala wa jukwaa, lakini kamwe si kurasa zako. Wakati mwingine hilo ni suala la umuhimu wa maudhui. Mara nyingi ni kizuizi cha kiufundi ambacho unaweza kukipata kwa dakika chache. Perplexity inaeleza ni mawakala gani inatumia, kila mmoja anafanya nini na trafiki yake inatoka wapi, kwa hivyo kila kiungo cha mnyororo kinaweza kukaguliwa: robots.txt, jibu ambalo seva yako inatuma, na kile ambacho jibu hilo lina.
Perplexity hupataje na kusoma kurasa?
Perplexity inaeleza mawakala wawili. Wana kazi tofauti, na tatizo kwa yeyote kati yao linaweza kuzuia ukurasa wako kuingia kwenye jibu.
PerplexityBotimeundwa kuonyesha na kuunganisha tovuti katika matokeo ya utafutaji ya Perplexity. Perplexity inapendekeza kuiruhusu kwenye robots.txt ukitaka kuonekana humo, na inasema haitumiki kupitia maudhui kwa ajili ya miundo ya msingi ya AI.Perplexity-Userinasaidia vitendo vya watumiaji. Mtu anapouliza swali, inaweza kutembelea ukurasa ili kusaidia kulijibu na kuunganisha kwenye ukurasa huo. Perplexity inasema haitumiki kupitia wavuti wala kukusanya data ya mafunzo.
Kwa vitendo, PerplexityBot huamua kama Perplexity inazijua kurasa zako kabla mtu yeyote hajauliza, na Perplexity-User huamua kama inaweza kufungua ukurasa moja kwa moja swali linapouhitaji. Ukitaka kunukuliwa, wote wawili wanapaswa kupata ukurasa uleule ambao kivinjari kinapata.
Je, robots.txt yako inazuia PerplexityBot?
Fungua https://yourdomain.com/robots.txt na utafute kundi linalotaja PerplexityBot. Kama halipo, crawler hufuata kundi la User-agent: *. Kwa mujibu wa RFC 9309, ulinganishaji hauzingatii herufi kubwa na ndogo, na kundi lenye jina huchukua nafasi ya kundi la * kabisa badala ya kuliongezea.
Kizuizi hiki ni cha kawaida. Katika utafiti wetu wa faili za robots.txt za vikoa 1,000 maarufu zaidi, tovuti 86 kati ya 518 zilizotoa robots.txt (16.6%) zilizuia ukurasa wa mwanzo kwa PerplexityBot. Hiyo ilikuwa sehemu kubwa zaidi kati ya crawler zote za utafutaji wa AI tulizojaribu; OAI-SearchBot ilizuiwa kwenye tovuti 58 (11.2%). Baadhi ya tovuti hizi huenda zilikusudia kuzuia mafunzo ya AI, lakini Perplexity inasema PerplexityBot si crawler ya mafunzo, kwa hivyo kuizuia kunagharimu kuonekana katika utafutaji bila kutimiza lengo hilo.
Mpangilio unaoruhusu Perplexity kuingia na kuweka eneo la faragha limefungwa unaonekana hivi:
User-agent: PerplexityBot
Allow: /
Disallow: /account/
User-agent: *
Allow: /
Disallow: /account/
Sitemap: https://example.com/sitemap.xml Pia hakikisha kwamba faili lenyewe linajibu ipasavyo. Kama robots.txt inarudisha hitilafu ya seva, RFC 9309 inasema crawler lazima ichukulie kwamba tovuti nzima imezuiwa. Anwani ya robots.txt inayorudisha ukurasa wa HTML wenye hali 200 haina sheria halali. Perplexity inasema mabadiliko yanaweza kuchukua hadi saa 24 kuonekana.
Je, firewall au CDN yako inazuia Perplexity?
robots.txt ni ombi, si udhibiti wa ufikiaji. Firewall, CDN au ulinzi wako dhidi ya bot ndio huamua kile kinachorudishwa kweli, na unaweza kuijibu Perplexity kwa 403, 429 au ukurasa wa changamoto huku ziara zako kwa kivinjari zikionekana kawaida. Nyaraka za Perplexity zinasema tovuti zilizo nyuma ya web application firewall huenda zikahitaji kuruhusu bot zake waziwazi.
Ijaribu kwa kuomba URL ileile kama kivinjari na kama kila wakala wa Perplexity, kisha linganisha hali na ukubwa:
for UA in "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36" \
"Mozilla/5.0 (compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot)" \
"Mozilla/5.0 (compatible; Perplexity-User/1.0; +https://perplexity.ai/perplexity-user)"; do
curl -s -o /dev/null -w "%{http_code} %{size_download}\n" -A "$UA" https://example.com/page
done 403, 429 au 503 kwa mawakala wa Perplexity pekee, ukurasa wenye kichwa Just a moment..., au jibu la 200 lililo dogo sana kuliko la kivinjari, vyote vinaashiria firewall. Jaribio hili linatoka kwenye anwani yako ya IP, si ya Perplexity, kwa hivyo linaonyesha jinsi sheria zako zinavyoshughulikia user agent; sheria zinazotegemea IP bado zinaweza kuwa tofauti kwa crawler halisi.
Ukitumia Cloudflare, zingatia mambo mawili. Nyaraka za Perplexity zinarudia kauli ya Cloudflare yenyewe kwamba Bot Fight Mode haiwezi kurukwa kwa WAF custom rules, kwa hivyo kipengele hicho kikiipa Perplexity changamoto, sheria ya kuruhusu haitasaidia. Na mnamo Agosti 2025 Cloudflare ilisema imeiondoa Perplexity kwenye orodha yake ya verified bots baada ya kuona kile ilichokiita upitiaji usiotangazwa; Perplexity ilipinga maelezo hayo. Kwa hivyo sheria zinazoruhusu verified bots pekee huenda zisiihusishe Perplexity. Kagua hali ya sasa kwenye dashibodi yako badala ya kukisia.
Ninairuhusuje Perplexity kwa masafa yake ya IP yaliyochapishwa?
Mtu yeyote anaweza kutuma ombi linalodai kuwa PerplexityBot, kwa hivyo sheria ya kuruhusu inayolinganisha user agent pekee inawaruhusu pia waigaji. Perplexity huchapisha masafa ya anwani za mawakala wote wawili na inapendekeza kulinganisha user agent na anwani ya IP pamoja:
curl -s https://www.perplexity.ai/perplexitybot.json | jq -r '.prefixes[] | .ipv4Prefix // .ipv6Prefix'
curl -s https://www.perplexity.ai/perplexity-user.json | jq -r '.prefixes[] | .ipv4Prefix // .ipv6Prefix' Perplexity inasema orodha hizi husasishwa mara kwa mara na inapendekeza kusasisha sheria zako za WAF kiotomatiki. Weka sheria ya kuruhusu juu ya sheria yoyote inayozuia au kutoa changamoto kwa maombi: ya kwanza katika custom rules za Cloudflare, au kwa namba ndogo zaidi ya kipaumbele katika AWS WAF. Kisha fuatilia kumbukumbu zako, kwa sababu mabadiliko ya firewall yanaweza kuchukua muda kusambaa.
Je, uchakataji wa JavaScript unaweza kuzuia Perplexity kusoma ukurasa?
Unaweza. Nyaraka za crawler za Perplexity hazisemi kama mawakala wake huendesha JavaScript, kwa hivyo dhana salama ni kwamba maandishi ambayo crawler inahitaji yanapaswa kuwa kwenye HTML ambayo seva inatuma. Kurasa zinazojengwa kabisa ndani ya kivinjari, kama programu za ukurasa mmoja zisizo na uchakataji upande wa seva, zinaweza kufika kama ganda tupu lenye alama ya kupakia.
Ukaguzi wa haraka ni kupakua ukurasa kwa curl na kutafuta kwenye matokeo sentensi kutoka kwenye maudhui yako makuu. Kama haipo, maandishi yanaongezwa na skripti. Uchakataji upande wa seva, uzalishaji wa kurasa tuli au prerendering kwa crawler hurekebisha hili kwa crawler zote za AI kwa mara moja, si Perplexity pekee.
Itakuwaje kama kila kitu kiko wazi na tovuti yangu bado haionekani?
Kusomeka ni sharti la awali, si hakikisho. Perplexity haichapishi jinsi inavyochagua vyanzo vya kunukuu, kwa hivyo ukurasa ambao kila wakala anaweza kuusoma bado unaweza kushindwa na kurasa zinazojibu swali moja kwa moja zaidi. Unachoweza kudhibiti ni kwamba hakuna kitu cha kiufundi kinachozuia: kichwa wazi cha ukurasa, jibu likielezwa mapema katika maandishi, na ukweli sahihi unaolingana na unachosema mahali pengine.
Kumbuka pia kile ambacho robots.txt haishughulikii. Perplexity inasema kwa kawaida Perplexity-User hupuuza robots.txt kwa sababu mtumiaji ndiye aliyeomba upakuaji. Kwa hivyo sheria ya Perplexity-User si njia ya kuaminika ya kuzuia ziara za moja kwa moja, na robots.txt inayoiruhusu si uthibitisho kwamba inapita kwenye firewall yako.
AISeeWhy huomba ukurasa wako kama PerplexityBot, Perplexity-User na crawler nyingine 12 sambamba na kivinjari, hutumia sheria zako za robots.txt kwa kila moja, hutambua kurasa za changamoto na huonyesha kiasi cha maandishi kinachofika bila JavaScript, ili uone ni kiungo kipi cha mnyororo kinashindwa.
Hatua zinazofuata
- Kikagua na kijaribu cha robots.txt kwa crawler za AI
- Ukaguzi wa IP ya crawler za AI
- Tazama mfano wa ripoti kamili
- Ufuatiliaji wa crawler za AI
- Mipango na bei
Crawler katika makala hii
Vyanzo
- Perplexity: Crawler za Perplexity
- RFC 9309: Robots Exclusion Protocol
- Cloudflare: Bot Fight Mode
- Cloudflare: Perplexity inatumia crawler za siri zisizotangazwa kukwepa maagizo ya tovuti ya kutopitiwa
- Perplexity: Mawakala au bot? Kuielewa AI kwenye wavuti wazi
- AISeeWhy: Ripoti ya ufikiaji wa crawler za AI, 2026-11