Зошто мојот сајт не се појавува во Perplexity?

Дознајте за околу 30 секунди дали PerplexityBot може да стигне до вашата страница и кое блокирање (robots.txt, заштитен ѕид или JavaScript) ве држи надвор од неговите одговори.

Бесплатно · Без регистрација · Резултат за 30 секунди

robots.txt за PerplexityBot

Групата што важи за PerplexityBot се чита според правилата од RFC 9309, а линијата што одлучува е прикажана.

Блокирања од заштитен ѕид и CDN

403, 429 или страница со предизвик што ја добиваат само краулерите се означува, а заштитниот ѕид што одговорил се именува.

Што враќа страницата

Статусот, големината и пренасочувањата за краулерот се споредуваат со оние за обичен прелистувач, па поскромниот одговор за краулерите се издвојува.

Поправка за секој наод

Секој наод доаѓа со промената што треба да се направи. Бесплатната проверка ви го прикажува резултатот и првиот наод; целосниот извештај чини $29, еднократно.

Краток одговор

Perplexity може да прикаже и да постави врска само до страници што PerplexityBot смее да ги обиколи и навистина ги добива. Вообичаени причини се правило во robots.txt што го забранува PerplexityBot, заштитен ѕид или CDN што му одговара со 403 или страница со предизвик, и текст што се појавува дури откако ќе се изврши JavaScript. Проверете ги сите три, а потоа дозволете ги објавените IP опсези на Perplexity. Ако Perplexity цитира конкурент, а не вас, прво исклучете ги овие блокирања, а потоа споредете ја вашата страница со страницата што ја цитира за истото прашање.

Најдете го блокирањето во 3 чекори

  1. Проверете го robots.txt

    Побарајте група што го именува PerplexityBot. Ако нема, важи групата User-agent: *, а именуваната група целосно го заменува *.

  2. Споредете прелистувач и краулер

    Побарајте ја страницата како прелистувач и како секој Perplexity агент. 403, 429 или 503 само за агентите, страница Just a moment... или многу помал 200 укажува на заштитниот ѕид.

  3. Погледнете го изворот на страницата

    Преземете ја страницата со curl и побарајте реченица од главната содржина. Ако ја нема, текстот го додаваат скрипти: прикажете го на серверот.

Често поставувани прашања

Зошто Perplexity го препорачува мојот конкурент, а не мене?

Perplexity не објавува како ги избира изворите, но може да цитира само страници што неговите агенти можат да ги прочитаат. Прво потврдете дека PerplexityBot и Perplexity-User ја добиваат вашата страница. Ако ја добиваат, отворете ја страницата што Perplexity ја цитира за истото прашање и споредете: дали вашата одговара токму на тоа прашање при врвот, со фактите наведени во текст? Проверката „Видливост во AI“ на AISeeWhy ги поставува прашањата на вашите купувачи во Perplexity и уште три асистенти и покажува кои конкуренти се именувани покрај вас.

Дали Perplexity ги тренира своите модели на мојата содржина?

Perplexity наведува дека PerplexityBot не се користи за обиколување содржина за AI основни модели и дека Perplexity-User не собира содржина за обука. Забраната на PerplexityBot затоа не служи како откажување од обуката; само ја намалува вашата видливост во резултатите од пребарување на Perplexity.

Колку време по поправката на robots.txt Perplexity ќе забележи?

Perplexity наведува дека на неговите системи може да им требаат до 24 часа за да ги одразат промените во robots.txt. Промените во заштитниот ѕид важат кога вашиот провајдер ќе ги примени, но дајте му време на краулерот да се врати пред да го оцените резултатот.

Може ли да го блокирам Perplexity-User со robots.txt?

Не сигурно. Perplexity наведува дека преземачот генерално го игнорира robots.txt затоа што преземањето го побарал корисник. Ако треба да го запрете, сигурната контрола е правило на заштитниот ѕид што се совпаѓа со неговите објавени IP опсези.

Дали е доволна проверка на user agent за да се препознае сообраќајот од Perplexity?

Не. User agent лесно се копира. Споредете ја изворната IP адреса со опсезите што Perplexity ги објавува во perplexitybot.json и perplexity-user.json, и во правилата на заштитниот ѕид совпаѓајте ги и user agent-от и IP адресата.

Прочитајте го целиот водич

Го прашувате Perplexity за вашиот производ, а тој цитира конкурент, сајт со рецензии или тема од форум, но никогаш вашите страници. Понекогаш тоа е прашање на релевантност. Често е техничко блокирање што може да го најдете за неколку минути. Perplexity документира кои агенти ги користи, што прави секој од нив и од каде доаѓа нивниот сообраќај, па секоја алка во синџирот може да се провери: robots.txt, одговорот што го праќа вашиот сервер и она што го содржи одговорот.

Како Perplexity наоѓа и чита страници?

Perplexity документира два агенти. Тие имаат различни задачи, а проблем со кој било од нив може да ја задржи вашата страница надвор од одговорот.

  • PerplexityBot е наменет да прикажува и да поставува врски до веб-сајтови во резултатите од пребарување на Perplexity. Perplexity препорачува да го дозволите во robots.txt ако сакате да се појавувате таму и наведува дека не се користи за обиколување содржина за AI основни модели.
  • Perplexity-User ги поддржува дејствата на корисниците. Кога некој поставува прашање, може да посети страница за да помогне во одговорот и да постави врска до неа. Perplexity наведува дека не се користи за обиколување на интернетот ниту за собирање податоци за обука.

Во пракса, PerplexityBot одлучува дали Perplexity знае за вашите страници пред некој да праша, а Perplexity-User одлучува дали може да отвори страница во живо кога прашањето го бара тоа. Ако сакате да бидете цитирани, двата треба да ја добијат истата страница што ја добива прелистувачот.

Дали вашиот robots.txt го блокира PerplexityBot?

Отворете https://yourdomain.com/robots.txt и побарајте група што го именува PerplexityBot. Ако нема таква, краулерот ја следи групата User-agent: *. Според RFC 9309, совпаѓањето не зависи од големи и мали букви, а именуваната група целосно ја заменува групата * наместо да се додава на неа.

Ова блокирање е често. Во нашата студија на robots.txt датотеките на 1.000 најпопуларни домени, 86 од 518 сајтови што сервираа robots.txt (16,6%) ја забрануваа почетната страница за PerplexityBot. Тоа беше најголемиот удел од сите AI краулери за пребарување што ги тестиравме; OAI-SearchBot беше блокиран на 58 сајтови (11,2%). Некои од овие сајтови можеби сакале да ја запрат обуката на AI, но Perplexity наведува дека PerplexityBot не е краулер за обука, па неговото блокирање чини видливост во пребарувањето без да ја постигне таа цел.

Поставка што го пушта Perplexity и затвора приватен дел изгледа вака:

User-agent: PerplexityBot
Allow: /
Disallow: /account/

User-agent: *
Allow: /
Disallow: /account/

Sitemap: https://example.com/sitemap.xml

Проверете и дали самата датотека одговара исправно. Ако robots.txt враќа серверска грешка, RFC 9309 вели дека краулерот мора да претпостави дека целиот сајт е забранет. Адреса на robots.txt што враќа HTML страница со статус 200 не содржи важечки правила. Perplexity наведува дека промените може да се одразат по најмногу 24 часа.

Дали вашиот заштитен ѕид или CDN го блокира Perplexity?

robots.txt е барање, а не контрола на пристап. Вашиот заштитен ѕид, CDN или заштитата од ботови одлучува што навистина се враќа, и може да му одговори на Perplexity со 403, 429 или страница со предизвик додека вашите посети од прелистувач изгледаат нормално. Документацијата на Perplexity вели дека сајтовите зад заштитен ѕид за веб-апликации можеби ќе треба изрично да ги дозволат неговите ботови.

Тестирајте го тоа така што ќе го побарате истиот URL како прелистувач и како секој агент на Perplexity, а потоа споредете ги статусот и големината:

for UA in "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36" \
          "Mozilla/5.0 (compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot)" \
          "Mozilla/5.0 (compatible; Perplexity-User/1.0; +https://perplexity.ai/perplexity-user)"; do
  curl -s -o /dev/null -w "%{http_code} %{size_download}\n" -A "$UA" https://example.com/page
done

403, 429 или 503 само за агентите на Perplexity, страница со наслов Just a moment... или одговор 200 што е многу помал од оној за прелистувачот укажуваат на заштитниот ѕид. Овој тест доаѓа од вашата IP адреса, а не од онаа на Perplexity, па покажува како вашите правила постапуваат со user agent-от; правилата засновани на IP сепак може да се разликуваат за вистинскиот краулер.

Ако користите Cloudflare, имајте предвид две работи. Документацијата на Perplexity ја повторува изјавата на самиот Cloudflare дека Bot Fight Mode не може да се прескокне со прилагодени WAF правила, па ако таа функција го предизвикува Perplexity, правило за дозволување нема да помогне. Освен тоа, во август 2025 Cloudflare соопшти дека го отстранил Perplexity од својата листа на потврдени ботови откако забележал, како што го опиша, непријавено обиколување; Perplexity го оспори тоа. Правилата што пропуштаат само потврдени ботови затоа можеби не го опфаќаат Perplexity. Проверете ја моменталната состојба во контролната табла наместо да претпоставувате.

Како да го дозволам Perplexity според неговите објавени IP опсези?

Секој може да испрати барање што тврди дека е PerplexityBot, па правило за дозволување што се совпаѓа само со user agent-от пушта и имитатори. Perplexity ги објавува опсезите на адреси на двата агенти и препорачува заедно да се совпаѓаат user agent-от и IP адресата:

curl -s https://www.perplexity.ai/perplexitybot.json | jq -r '.prefixes[] | .ipv4Prefix // .ipv6Prefix'
curl -s https://www.perplexity.ai/perplexity-user.json | jq -r '.prefixes[] | .ipv4Prefix // .ipv6Prefix'

Perplexity наведува дека овие листи редовно се ажурираат и предлага автоматско ажурирање на вашите WAF правила. Ставете го правилото за дозволување над секое правило што ги блокира или предизвикува барањата: прво во прилагодените правила на Cloudflare, или со помал број на приоритет во AWS WAF. Потоа следете ги дневниците, бидејќи на промените во заштитниот ѕид може да им треба време да се применат насекаде.

Може ли рендерирањето со JavaScript да го спречи Perplexity да прочита страница?

Може. Документацијата за краулерите на Perplexity не кажува дали неговите агенти извршуваат JavaScript, па безбедната претпоставка е дека текстот што му треба на краулерот треба да биде во HTML-от што го праќа серверот. Страниците изградени целосно во прелистувачот, како апликации со една страница без серверско рендерирање, може да пристигнат како празна обвивка со индикатор за вчитување.

Брза проверка е да ја преземете страницата со curl и во излезот да побарате реченица од главната содржина. Ако ја нема, текстот го додаваат скрипти. Рендерирањето на серверот, статичкото генерирање или претходното рендерирање за краулери го поправаат ова за сите AI краулери одеднаш, не само за Perplexity.

Што ако сè е отворено, а мојот сајт сепак не се појавува?

Читливоста е предуслов, а не гаранција. Perplexity не објавува како избира кои извори ќе ги цитира, па страница што сите агенти можат да ја прочитаат сепак може да изгуби од страници што подиректно одговараат на прашањето. Она што можете да го контролирате е ништо техничко да не стои на патот: јасен наслов на страницата, одговорот наведен рано во текстот и точни факти што се совпаѓаат со она што го кажувате на други места.

Запомнете и што не опфаќа robots.txt. Perplexity наведува дека Perplexity-User генерално го игнорира robots.txt затоа што преземањето го побарал корисник. Правило за Perplexity-User затоа не е сигурен начин да се блокираат посетите во живо, а robots.txt што го дозволува не е доказ дека тој поминува низ вашиот заштитен ѕид.

AISeeWhy ја презема вашата страница како PerplexityBot, Perplexity-User и уште 12 краулери паралелно со прелистувач, ги применува вашите robots.txt правила за секој од нив, препознава страници со предизвик и покажува колку од текстот пристигнува без JavaScript, за да видите која алка во синџирот не функционира.

Бесплатни алатки

Следни чекори

Краулери во оваа статија

Извори

Уште статии

Објавено · Ажурирано