ЖИ краулерлерін бақылау
Файрвол ережесі, CDN баптауы немесе жаңа robots.txt ЖИ краулерлерін бір түнде бұғаттап тастауы мүмкін, ал адамдарға сайтыңызда ештеңе бұзылмағандай көрінеді. Бақылау маңызды беттеріңізді қайта тексеріп, оларды жаңа бірдеңе бұғаттағанда сізге email жібереді.
Тегін · Тіркелусіз · Нәтиже 30 секундта
Жоспарлар мен бағалар → Толық есептің мысалын қараңыз →
Бұл мәтін ағылшын тілінен машиналық аудармамен аударылған.
Бақылау нені тексереді
Әр іске қосу басты бетіміздегі тегін тексерумен бірдей. Бетіңіз 16 ЖИ және іздеу краулері ретінде, curl ретінде және компьютердегі браузер ретінде, әрқайсысы өзінің жарияланған user agent-імен алынады. robots.txt әр краулер токені үшін бағаланады, беттің құрылымдалған деректері, мазмұны, күндері, sitemap-тері, hreflang және llms.txt тексеріледі. Нәтиже — 0-ден 100-ге дейінгі баға және P1-ден P3-ке дейінгі басымдығы бар мәселелер тізімі.
Email қашан келеді
Бақыланатын беттер таңдауыңыз бойынша күн сайын немесе апта сайын қайта тексеріледі. Жаңа бұғаттайтын мәселе пайда болғанда, мысалы, краулер енді 403 немесе тексеру бетін алғанда, немесе баға 10 ұпайға не одан көпке төмендегенде email аласыз. Email не өзгергенін айтып, түзетуі бар есепке сілтеме береді.
Нені көре алмайды
Сұраулар краулер операторларының өз IP мекенжайларынан емес, біздің серверімізден әр краулердің user agent-імен жіберіледі. Нақты краулерлерге IP бойынша сенетін файрвол оларға бізден басқаша қарауы мүмкін, және әр бұғаттау мәселесі мұны атап өтеді. Нақты краулерлерге қалай жауап берілгенін көру үшін ақылы жоспарлардағы сервер журналын тексеру access log-ыңызды оқып, әр ЖИ краулерінің келулері мен мәртебе кодтарын санайды.
Бақылауы бар жоспарлар
- Pro, айына $22: 3 бақыланатын бет, жеке, коммерциялық емес сайт үшін.
- Business, айына $88: 25 бақыланатын бет, компания сайттары мен клиенттік жұмыс үшін.
- Agency, айына $288: көптеген клиент сайттары үшін 60 бақыланатын бет.
- Enterprise, айына $888: 100 бақыланатын бет.
Тегін жоспарда бақылау жоқ: ол күніне бір тексеруді баға және бірінші мәселемен береді. Жоспарлар ай сайын төленеді, кез келген уақытта тоқтатуға болады және әр төлем 14 күн ішінде толық қайтарылады.
Қалай бастау керек
- Ең маңызды бетіңізде тегін тексеруді іске қосып, бірінші мәселені қараңыз.
- Бағалар бетінде жоспар таңдап, email арқылы кіріңіз.
- Бақыланатын беттерді аккаунтыңыздағы Бақылау бөліміне қосыңыз: басты бет, бағалар, негізгі өнім не қызмет беттері және маңызды мақалалар.
- Күн сайын немесе апта сайын таңдаңыз. Түзетуден кейін бағаның бұрынғы және кейінгі мәнін көру үшін бетті қайта тексеріңіз.
Жиі қойылатын сұрақтар
Қандай өзгерістер хабарландыру тудырады?
Бақыланатын беттегі жаңа бұғаттайтын мәселе, мысалы, енді бас тартылған краулер, немесе алдыңғы тексеруден бері бағаның 10 ұпайға не одан көпке төмендеуі.
Бақылау нақты GPTBot пен ClaudeBot-ты пайдалана ма?
Жоқ. Ол олардың жарияланған user agent-терін біздің серверімізден жібереді. Бұл файрвол мен серверіңіз сол user agent-терге қалай қарайтынын көрсетеді; нақты келулерді сервер журналын тексеру көрсетеді.
Клиент сайттарын бақылай аламын ба?
Иә, Business, Agency және Enterprise жоспарларында. Pro жеке, коммерциялық емес пайдалануға арналған.
Төлемес бұрын байқап көре аламын ба?
Тегін тексеру бір іске қосудың кез келген бетте не табатынын көрсетеді. Бақылаудың өзіне ақылы жоспар керек, оны кез келген уақытта тоқтатып, 14 күн ішінде ақшаңызды қайтарып ала аласыз.