Зашто се мој сајт не појављује у Perplexity-ју?

За око 30 секунди сазнајте да ли PerplexityBot може да приступи вашој страници и која блокада (robots.txt, заштитни зид или JavaScript) вас држи ван његових одговора.

Бесплатно · Без регистрације · Резултат за 30 секунди

robots.txt за PerplexityBot

Група која важи за PerplexityBot чита се по правилима RFC 9309, а приказана је и линија која одлучује.

Блокаде заштитног зида и CDN-а

403, 429 или страница са изазовом коју добијају само краулери је означена, а заштитни зид који је одговорио је именован.

Шта страница враћа

Статус, величина и преусмеравања за краулер упоређују се са оним што добија обичан прегледач, па се истиче оскуднији одговор за краулере.

Исправка за сваки налаз

Уз сваки налаз стиже и измена коју треба направити. Бесплатна провера приказује ваш резултат и први налаз, а цео извештај кошта $29, једнократно.

Кратак одговор

Perplexity може да прикаже и линкује само странице које PerplexityBot сме да обиђе и које заиста добија. Уобичајени узроци су правило у robots.txt које забрањује PerplexityBot, заштитни зид или CDN који му одговара са 403 или страницом са изазовом и текст који се појављује тек када се покрене JavaScript. Проверите сва три, а затим дозволите објављене IP опсеге Perplexity-ја. Ако Perplexity цитира конкурента, а не вас, прво искључите ове блокаде, а затим упоредите своју страницу са страницом коју цитира за исто питање.

Пронађите блокаду у 3 корака

  1. Проверите robots.txt

    Потражите групу која именује PerplexityBot. Ако је нема, важи група User-agent: *, а именована група у потпуности замењује *.

  2. Упоредите прегледач и краулер

    Затражите страницу као прегледач и као сваки Perplexity агент. 403, 429 или 503 само за агенте, страница Just a moment... или знатно мањи одговор 200 указују на заштитни зид.

  3. Погледајте изворни код странице

    Преузмите страницу помоћу curl и потражите реченицу из главног садржаја. Ако недостаје, текст додају скрипте: рендерујте га на серверу.

Честа питања

Зашто Perplexity препоручује мог конкурента, а не мене?

Perplexity не објављује како бира изворе, али може да цитира само странице које његови агенти могу да прочитају. Прво потврдите да PerplexityBot и Perplexity-User добијају вашу страницу. Ако је добијају, отворите страницу коју Perplexity цитира за исто питање и упоредите: да ли ваша одговара баш на то питање при врху, са чињеницама наведеним у тексту? AISeeWhy провера AI видљивости поставља питања ваших купаца у Perplexity-ју и још три асистента и показује који конкуренти се наводе поред вас.

Да ли Perplexity обучава своје моделе на мом садржају?

Perplexity каже да се PerplexityBot не користи за прикупљање садржаја за основне AI моделе и да Perplexity-User не прикупља садржај за обуку. Забрана PerplexityBot-а зато не служи као одјава од обуке; само смањује вашу видљивост у резултатима претраге Perplexity-ја.

Колико дуго након исправке robots.txt-а ће Perplexity то приметити?

Perplexity каже да његовим системима може бити потребно до 24 сата да примене промене у robots.txt. Промене у заштитном зиду ступају на снагу када их ваш провајдер примени, али дајте краулеру времена да се врати пре него што процените резултат.

Могу ли да блокирам Perplexity-User помоћу robots.txt?

Не поуздано. Perplexity каже да овај агент углавном занемарује robots.txt јер је преузимање затражио корисник. Ако морате да га зауставите, правило заштитног зида везано за његове објављене IP опсеге је поуздана контрола.

Да ли је провера user agent-а довољна да се препозна саобраћај Perplexity-ја?

Није. User agent се лако копира. Упоредите изворну IP адресу са опсезима које Perplexity објављује у perplexitybot.json и perplexity-user.json и у правилима заштитног зида проверавајте и user agent и IP.

Прочитајте цео водич

Питате Perplexity о свом производу, а он цитира конкурента, сајт са рецензијама или тему на форуму, али никада ваше странице. Понекад је то питање релевантности. Често је то техничка блокада коју можете пронаћи за неколико минута. Perplexity документује које агенте користи, шта сваки од њих ради и одакле долази њихов саобраћај, па се свака карика у ланцу може проверити: robots.txt, одговор који шаље ваш сервер и шта тај одговор садржи.

Како Perplexity проналази и чита странице?

Perplexity документује два агента. Имају различите задатке, а проблем са било којим од њих може да задржи вашу страницу ван одговора.

  • PerplexityBot служи да прикаже и линкује сајтове у резултатима претраге Perplexity-ја. Perplexity препоручује да га дозволите у robots.txt ако желите да се ту појављујете и каже да се не користи за прикупљање садржаја за основне AI моделе.
  • Perplexity-User подржава радње корисника. Када неко постави питање, може да посети страницу да би помогао у одговору и да линкује ту страницу. Perplexity каже да се не користи за обилажење веба нити за прикупљање података за обуку.

У пракси PerplexityBot одлучује да ли Perplexity зна за ваше странице пре него што ико пита, а Perplexity-User да ли може уживо да отвори страницу када је питању потребна. Ако желите да будете цитирани, оба треба да добију исту страницу коју добија прегледач.

Да ли ваш robots.txt блокира PerplexityBot?

Отворите https://yourdomain.com/robots.txt и потражите групу која наводи PerplexityBot. Ако је нема, краулер прати групу User-agent: *. Према RFC 9309, поклапање не разликује велика и мала слова, а именована група потпуно замењује групу * уместо да јој се додаје.

Ова блокада је честа. У нашем истраживању robots.txt фајлова 1000 најпопуларнијих домена, 86 од 518 сајтова који су послужили robots.txt (16,6%) забранило је почетну страницу за PerplexityBot. То је био највећи удео међу свим AI краулерима за претрагу које смо тестирали; OAI-SearchBot је био блокиран на 58 сајтова (11,2%). Неки од ових сајтова су можда хтели да зауставе AI обуку, али Perplexity каже да PerplexityBot није краулер за обуку, па његово блокирање кошта видљивости у претрази, а не служи том циљу.

Подешавање које пушта Perplexity и држи приватни део затвореним изгледа овако:

User-agent: PerplexityBot
Allow: /
Disallow: /account/

User-agent: *
Allow: /
Disallow: /account/

Sitemap: https://example.com/sitemap.xml

Проверите и да сам фајл исправно одговара. Ако robots.txt враћа грешку сервера, RFC 9309 каже да краулер мора да претпостави да је цео сајт забрањен. Адреса robots.txt која враћа HTML страницу са статусом 200 не садржи ниједно важеће правило. Perplexity каже да промене могу да се примене тек након 24 сата.

Да ли ваш заштитни зид или CDN блокира Perplexity?

robots.txt је молба, а не контрола приступа. Ваш заштитни зид, CDN или заштита од ботова одлучују шта се заиста враћа, и могу да одговоре Perplexity-ју са 403, 429 или страницом са изазовом, док посете из вашег прегледача изгледају нормално. Документација Perplexity-ја каже да сајтови иза заштитног зида за веб апликације (WAF) можда морају изричито да дозволе његове ботове.

Тестирајте тако што ћете исти URL затражити као прегледач и као сваки Perplexity агент, па упоредите статус и величину:

for UA in "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36" \
          "Mozilla/5.0 (compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot)" \
          "Mozilla/5.0 (compatible; Perplexity-User/1.0; +https://perplexity.ai/perplexity-user)"; do
  curl -s -o /dev/null -w "%{http_code} %{size_download}\n" -A "$UA" https://example.com/page
done

Статус 403, 429 или 503 само за Perplexity агенте, страница са насловом Just a moment... или одговор 200 који је много мањи од оног за прегледач указују на заштитни зид. Овај тест долази са ваше IP адресе, а не са адресе Perplexity-ја, па показује како ваша правила третирају user agent; правила заснована на IP адреси и даље могу другачије да третирају прави краулер.

Ако користите Cloudflare, имајте на уму две ствари. Документација Perplexity-ја понавља Cloudflare-ову изјаву да се Bot Fight Mode не може заобићи прилагођеним WAF правилима, па ако та функција Perplexity-ју поставља изазов, правило за дозволу неће помоћи. Осим тога, Cloudflare је у августу 2025. рекао да је уклонио Perplexity са своје листе проверених ботова након што је приметио, како је то описао, непријављено обилажење; Perplexity је оспорио тај опис. Правила која пропуштају само проверене ботове зато можда не обухватају Perplexity. Проверите тренутно стање на својој контролној табли уместо да претпостављате.

Како да дозволим Perplexity према објављеним IP опсезима?

Свако може да пошаље захтев који тврди да је PerplexityBot, па правило за дозволу које се поклапа само са user agent-ом пропушта и имитаторе. Perplexity објављује опсеге адреса оба агента и препоручује да заједно проверавате user agent и IP адресу:

curl -s https://www.perplexity.ai/perplexitybot.json | jq -r '.prefixes[] | .ipv4Prefix // .ipv6Prefix'
curl -s https://www.perplexity.ai/perplexity-user.json | jq -r '.prefixes[] | .ipv4Prefix // .ipv6Prefix'

Perplexity каже да се ове листе редовно ажурирају и предлаже да аутоматизујете ажурирање својих WAF правила. Поставите правило за дозволу изнад сваког правила које блокира захтеве или им поставља изазов: на прво место у Cloudflare прилагођеним правилима или са нижим бројем приоритета у AWS WAF-у. Затим пратите логове, јер промене у заштитном зиду могу да се шире неко време.

Може ли JavaScript рендеровање да спречи Perplexity да прочита страницу?

Може. Документација о краулерима Perplexity-ја не каже да ли његови агенти извршавају JavaScript, па је безбедно претпоставити да текст који је краулеру потребан мора бити у HTML-у који шаље сервер. Странице у потпуности изграђене у прегледачу, као што су апликације са једном страницом без рендеровања на серверу, могу да стигну као празна љуска са индикатором учитавања.

Брза провера је да преузмете страницу помоћу curl и у излазу потражите реченицу из главног садржаја. Ако је нема, текст додају скрипте. Рендеровање на серверу, статичко генерисање или унапред рендеровање за краулере то решава за све AI краулере одједном, не само за Perplexity.

Шта ако је све отворено, а мој сајт се и даље не појављује?

Читљивост је предуслов, а не гаранција. Perplexity не објављује како бира изворе које цитира, па страница коју сваки агент може да прочита и даље може да изгуби од страница које директније одговарају на питање. Оно што можете да контролишете је да ништа техничко не стоји на путу: јасан наслов странице, одговор изнет рано у тексту и тачне чињенице које се поклапају са оним што говорите на другим местима.

Имајте на уму и шта robots.txt не покрива. Perplexity каже да Perplexity-User углавном занемарује robots.txt јер је преузимање затражио корисник. Правило за Perplexity-User зато није поуздан начин да блокирате посете уживо, а robots.txt који га дозвољава није доказ да пролази кроз ваш заштитни зид.

AISeeWhy преузима вашу страницу као PerplexityBot, Perplexity-User и још 12 краулера упоредо са прегледачем, примењује ваша robots.txt правила за сваки од њих, препознаје странице са изазовом и показује колико текста стиже без JavaScript-а, тако да видите која карика у ланцу не ради.

Бесплатни алати

Следећи кораци

Краулери у овом чланку

Извори

Још чланака

Објављено · Ажурирано