robots.txt өзгерттіңіз бе? Әр ЖИ краулері оны қалай оқитынын көріңіз
Қате топтағы бір жол ChatGPT іздеуін бұғаттап тастауы мүмкін, ал сіз тек ЖИ оқытуын бұғаттағыңыз келген. Нәтижені 16 краулер үшін тексеріңіз.
Тегін · Тіркелусіз · Нәтиже 30 секундта
Қай топ қолданылады
Краулер * тобын емес, өз аты аталған топты ұстанады, бұл көп сайт иелерін таң қалдырады.
Іздеу мен оқыту
Қаласаңыз, оқыту краулерлерін бұғаттаңыз, ал сізді ЖИ іздеу жауаптарына шығаратындарын қалдырыңыз.
Нақты түзету
Өзгертуге қажет жолдар, қоюға дайын, және растау үшін қайта тексеру.
Cloudflare-ге көшкеннен кейін · Редизайннан кейін · Shopify-ға көшкеннен кейін