Zašto se moja web-stranica ne prikazuje u Perplexityju?
Za otprilike 30 sekundi saznajte može li PerplexityBot doći do vaše stranice i koja vas blokada (robots.txt, vatrozid ili JavaScript) drži izvan njegovih odgovora.
Besplatno · Bez registracije · Rezultat za 30 sekundi
robots.txt za PerplexityBot
Grupa koja vrijedi za PerplexityBot čita se prema pravilima RFC 9309, a redak koji odlučuje je prikazan.
Blokade vatrozida i CDN-a
Kod 403, 429 ili stranica s provjerom koju dobivaju samo crawleri bivaju označeni, a vatrozid koji je odgovorio imenuje se.
Što stranica vraća
Status, veličina i preusmjeravanja za crawlera uspoređuju se s onima običnog preglednika, pa se jasno vidi kraći odgovor za crawlere.
Rješenje za svaki nalaz
Uz svaki nalaz dolazi promjena koju treba napraviti. Besplatna provjera prikazuje vaš rezultat i prvi nalaz; cijeli izvještaj košta $29, jednokratno.
Perplexity može prikazati i povezati samo stranice koje PerplexityBot smije dohvatiti i koje stvarno dobiva. Uobičajeni su uzroci pravilo u robots.txt koje zabranjuje PerplexityBot, vatrozid ili CDN koji mu odgovara kodom 403 ili stranicom s provjerom te tekst koji se pojavljuje tek nakon izvođenja JavaScripta. Provjerite sva tri, a zatim propustite objavljene IP raspone Perplexityja. Ako Perplexity citira konkurenta, a ne vas, najprije isključite ove blokade, a zatim svoju stranicu usporedite sa stranicom koju citira za isto pitanje.
Pronađite blokadu u 3 koraka
- Provjerite robots.txt
Potražite grupu koja imenuje
PerplexityBot. Ako je nema, vrijedi grupaUser-agent: *, a imenovana grupa u potpunosti zamjenjuje*. - Usporedite preglednik i crawler
Zatražite stranicu kao preglednik i kao svaki Perplexityjev agent. Kod 403, 429 ili 503 samo za agente, stranica
Just a moment...ili mnogo manji odgovor 200 upućuju na vatrozid. - Pogledajte izvorni kod stranice
Dohvatite stranicu pomoću
curli potražite rečenicu iz glavnog sadržaja. Ako je nema, tekst dodaju skripte: renderirajte ga na poslužitelju.
Česta pitanja
Zašto Perplexity preporučuje mojeg konkurenta, a ne mene?
Perplexity ne objavljuje kako bira izvore, ali može citirati samo stranice koje njegovi agenti mogu pročitati. Najprije potvrdite da PerplexityBot i Perplexity-User dobivaju vašu stranicu. Ako dobivaju, otvorite stranicu koju Perplexity citira za isto pitanje i usporedite: odgovara li vaša upravo na to pitanje pri vrhu, s činjenicama navedenima u tekstu? Provjera AI vidljivosti u AISeeWhyju postavlja pitanja vaših kupaca u Perplexityju i još tri asistenta i pokazuje koji se konkurenti navode uz vas.
Trenira li Perplexity svoje modele na mojem sadržaju?
Perplexity navodi da se PerplexityBot ne koristi za prikupljanje sadržaja za temeljne AI modele i da Perplexity-User ne prikuplja sadržaj za treniranje. Zabrana za PerplexityBot stoga ne služi kao isključenje iz treniranja; samo smanjuje vašu vidljivost u rezultatima pretraživanja Perplexityja.
Koliko nakon ispravka robots.txt će Perplexity primijetiti promjenu?
Perplexity navodi da njegovim sustavima može trebati do 24 sata da preuzmu promjene u robots.txt. Promjene vatrozida stupaju na snagu kad ih vaš pružatelj primijeni, ali dajte crawleru vremena da se vrati prije nego što procijenite rezultat.
Mogu li blokirati Perplexity-User putem robots.txt?
Ne pouzdano. Perplexity navodi da taj dohvatitelj uglavnom zanemaruje robots.txt jer je dohvaćanje zatražio korisnik. Ako ga trebate zaustaviti, pouzdana je kontrola pravilo vatrozida usklađeno s njegovim objavljenim IP rasponima.
Je li provjera user agenta dovoljna za prepoznavanje prometa Perplexityja?
Nije. User agente lako je kopirati. Usporedite izvornu IP adresu s rasponima koje Perplexity objavljuje u perplexitybot.json i perplexity-user.json te u pravilima vatrozida provjeravajte i user agent i IP adresu.
Pročitajte cijeli vodič
Pitate Perplexity o svom proizvodu, a on citira konkurenta, stranicu s recenzijama ili temu na forumu, ali nikad vaše stranice. Ponekad je to pitanje relevantnosti. Često je riječ o tehničkoj blokadi koju možete pronaći za nekoliko minuta. Perplexity dokumentira koje agente koristi, čemu svaki služi i odakle dolazi njihov promet, pa se svaka karika u lancu može provjeriti: robots.txt, odgovor koji šalje vaš poslužitelj i ono što taj odgovor sadrži.
Kako Perplexity pronalazi i čita stranice?
Perplexity dokumentira dva agenta. Imaju različite zadaće, a problem s bilo kojim od njih može vašu stranicu držati izvan odgovora.
PerplexityBotsluži za prikazivanje i povezivanje web-stranica u rezultatima pretraživanja Perplexityja. Perplexity preporučuje da ga dopustite u robots.txt ako se želite ondje pojavljivati i navodi da se ne koristi za prikupljanje sadržaja za temeljne AI modele.Perplexity-Userpodržava radnje korisnika. Kad netko postavi pitanje, može posjetiti stranicu kako bi pomogao odgovoriti i povezati se na nju. Perplexity navodi da se ne koristi za indeksiranje weba ni za prikupljanje podataka za treniranje.
U praksi PerplexityBot određuje zna li Perplexity za vaše stranice prije nego što itko pita, a Perplexity-User određuje može li otvoriti stranicu uživo kad je pitanju potrebna. Ako želite biti citirani, oba bi trebala dobiti istu stranicu koju dobiva preglednik.
Blokira li vaš robots.txt PerplexityBot?
Otvorite https://yourdomain.com/robots.txt i potražite grupu koja navodi PerplexityBot. Ako je nema, crawler slijedi grupu User-agent: *. Prema RFC 9309 podudaranje ne razlikuje velika i mala slova, a imenovana grupa potpuno zamjenjuje grupu * umjesto da joj se pridoda.
Ova je blokada česta. U našem istraživanju datoteka robots.txt 1.000 najpopularnijih domena 86 od 518 web-stranica koje su poslužile robots.txt (16,6 %) zabranilo je naslovnu stranicu za PerplexityBot. To je bio najveći udio od svih AI crawlera za pretraživanje koje smo testirali; OAI-SearchBot bio je blokiran na 58 web-stranica (11,2 %). Neke su od tih web-stranica možda htjele spriječiti treniranje AI modela, ali Perplexity navodi da PerplexityBot nije crawler za treniranje, pa njegovo blokiranje košta vidljivosti u pretraživanju, a taj cilj ne ostvaruje.
Postavka koja propušta Perplexity, a privatni dio drži zatvorenim, izgleda ovako:
User-agent: PerplexityBot
Allow: /
Disallow: /account/
User-agent: *
Allow: /
Disallow: /account/
Sitemap: https://example.com/sitemap.xml Provjerite i odgovara li sama datoteka ispravno. Ako robots.txt vraća pogrešku poslužitelja, RFC 9309 kaže da crawler mora pretpostaviti da je cijela web-stranica zabranjena. Adresa robots.txt koja vraća HTML stranicu sa statusom 200 ne sadrži nijedno valjano pravilo. Perplexity navodi da promjene mogu postati vidljive tek nakon do 24 sata.
Blokira li vaš vatrozid ili CDN Perplexity?
robots.txt je zahtjev, a ne kontrola pristupa. Vaš vatrozid, CDN ili zaštita od botova odlučuju što se stvarno šalje natrag, a mogu Perplexityju odgovoriti kodom 403, 429 ili stranicom s provjerom dok vaši posjeti iz preglednika izgledaju normalno. Dokumentacija Perplexityja navodi da web-stranice iza vatrozida za web-aplikacije možda moraju izričito propustiti njegove botove.
Testirajte to tako da isti URL zatražite kao preglednik i kao svaki od agenata Perplexityja, a zatim usporedite status i veličinu:
for UA in "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36" \
"Mozilla/5.0 (compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot)" \
"Mozilla/5.0 (compatible; Perplexity-User/1.0; +https://perplexity.ai/perplexity-user)"; do
curl -s -o /dev/null -w "%{http_code} %{size_download}\n" -A "$UA" https://example.com/page
done Kod 403, 429 ili 503 samo za agente Perplexityja, stranica s naslovom Just a moment... ili odgovor 200 znatno manji od onoga za preglednik upućuju na vatrozid. Ovaj test dolazi s vaše IP adrese, a ne s Perplexityjeve, pa pokazuje kako vaša pravila tretiraju user agent; pravila temeljena na IP adresi za pravi se crawler i dalje mogu razlikovati.
Ako koristite Cloudflare, imajte na umu dvije stvari. Dokumentacija Perplexityja ponavlja Cloudflareovu izjavu da se Bot Fight Mode ne može zaobići prilagođenim pravilima WAF-a, pa ako ta značajka postavlja provjeru Perplexityju, pravilo za propuštanje neće pomoći. Osim toga, u kolovozu 2025. Cloudflare je objavio da je uklonio Perplexity sa svog popisa provjerenih botova nakon što je uočio, kako je naveo, neprijavljeno indeksiranje; Perplexity je osporio taj prikaz. Pravila koja propuštaju samo provjerene botove stoga možda ne obuhvaćaju Perplexity. Provjerite trenutačno stanje na nadzornoj ploči umjesto da to pretpostavljate.
Kako propustiti Perplexity prema objavljenim IP rasponima?
Svatko može poslati zahtjev koji se predstavlja kao PerplexityBot, pa pravilo za propuštanje koje se podudara samo s user agentom propušta i imitatore. Perplexity objavljuje raspone adresa obaju agenata i preporučuje da se user agent i IP adresa provjeravaju zajedno:
curl -s https://www.perplexity.ai/perplexitybot.json | jq -r '.prefixes[] | .ipv4Prefix // .ipv6Prefix'
curl -s https://www.perplexity.ai/perplexity-user.json | jq -r '.prefixes[] | .ipv4Prefix // .ipv6Prefix' Perplexity navodi da se ti popisi redovito ažuriraju i predlaže automatsko ažuriranje pravila WAF-a. Postavite pravilo za propuštanje iznad svih pravila koja blokiraju ili postavljaju provjeru: na prvo mjesto među prilagođenim pravilima Cloudflarea ili s nižim brojem prioriteta u AWS WAF-u. Zatim pratite zapisnike, jer promjene vatrozida mogu trebati vremena da se prošire.
Može li renderiranje JavaScriptom spriječiti Perplexity da pročita stranicu?
Može. Dokumentacija o crawlerima Perplexityja ne navodi izvode li njegovi agenti JavaScript, pa je sigurna pretpostavka da tekst koji crawler treba mora biti u HTML-u koji šalje poslužitelj. Stranice izgrađene u cijelosti u pregledniku, poput jednostraničnih aplikacija bez renderiranja na poslužitelju, mogu stići kao prazna ljuska s indikatorom učitavanja.
Brza je provjera dohvatiti stranicu s curl i u izlazu potražiti rečenicu iz glavnog sadržaja. Ako je nema, tekst dodaju skripte. Renderiranje na poslužitelju, statičko generiranje ili predrenderiranje za crawlere to rješava za sve AI crawlere odjednom, ne samo za Perplexity.
Što ako je sve otvoreno, a moja se web-stranica i dalje ne pojavljuje?
Čitljivost je preduvjet, a ne jamstvo. Perplexity ne objavljuje kako bira izvore koje citira, pa stranica koju svaki agent može pročitati i dalje može izgubiti od stranica koje izravnije odgovaraju na pitanje. Ono što možete kontrolirati jest da ništa tehničko ne stoji na putu: jasan naslov stranice, odgovor naveden rano u tekstu i točne činjenice koje se slažu s onim što navodite drugdje.
Imajte na umu i što robots.txt ne obuhvaća. Perplexity navodi da Perplexity-User uglavnom zanemaruje robots.txt jer je dohvaćanje zatražio korisnik. Pravilo za Perplexity-User stoga nije pouzdan način za blokiranje posjeta uživo, a robots.txt koji ga dopušta nije dokaz da prolazi kroz vaš vatrozid.
AISeeWhy dohvaća vašu stranicu kao PerplexityBot, Perplexity-User i 12 drugih crawlera uz preglednik, primjenjuje pravila iz vašeg robots.txt za svakog od njih, prepoznaje stranice s provjerom i pokazuje koliko teksta stiže bez JavaScripta, pa možete vidjeti koja karika u lancu ne radi.
Sljedeći koraci
- robots.txt tester i provjera za AI crawlere
- Provjera IP adrese AI crawlera
- Pogledajte primjer potpunog izvještaja
- Praćenje AI crawlera
- Planovi i cijene
Crawleri u ovom članku
Izvori
- Perplexity: crawleri Perplexityja
- RFC 9309: Robots Exclusion Protocol
- Cloudflare: Bot Fight Mode
- Cloudflare: Perplexity koristi prikrivene, neprijavljene crawlere kako bi zaobišao zabrane indeksiranja web-stranica
- Perplexity: Agenti ili botovi? Kako razumjeti AI na otvorenom webu
- AISeeWhy: izvještaj o pristupu AI crawlera, 2026-11