Crawlere AI și AEO, explicate
Ghiduri practice pentru proprietari de site-uri, marketeri și dezvoltatori: ce crawlere AI există, ce au voie să citească și cum te asiguri că răspunsurile AI îți pot citi și cita paginile.
Poate ChatGPT să-mi vadă site-ul? Cum verifici
Cum verifici dacă ChatGPT îți poate citi și cita site-ul: OAI-SearchBot, GPTBot și ChatGPT-User, robots.txt, firewall-uri și un test rapid cu curl.
Citește articolul →Crawlere OpenAICrawlerele OpenAI explicate: GPTBot, OAI-SearchBot și ChatGPT-User
Ce fac cele trei crawlere OpenAI, ce token din robots.txt controlează ce și ce se schimbă dacă blochezi GPTBot, OAI-SearchBot sau ChatGPT-User.
Citește articolul →Firewall-uri și CDN-uriBlochează Cloudflare crawlerele AI? Cum afli și cum remediezi
De ce Cloudflare și alte WAF-uri răspund crawlerelor AI cu 403 sau pagini de verificare, cum observi asta și cum permiți în siguranță crawlerele de căutare AI.
Citește articolul →robots.txtrobots.txt pentru crawlere AI: ce permiți și ce blochezi
Cum scrii robots.txt pentru crawlere AI: permite căutarea AI, alege în privința antrenării, tokenul fiecărui crawler, regulile RFC 9309 și greșeli frecvente.
Citește articolul →llms.txtCe este llms.txt și merită să-l adaugi?
llms.txt explicat: ce este propunerea, formatul Markdown, cine îl citește azi și cum scrii unul în zece minute, cu o privire sinceră asupra adoptării.
Citește articolul →Bazele AEOAEO vs SEO: ce e la fel și ce se schimbă pentru răspunsurile AI
AEO comparat cu SEO: ce rămâne la fel, ce se schimbă pentru răspunsurile AI (acces, răspuns la început, entități, prospețime) și o listă de verificare.
Citește articolul →Crawlere ClaudeCrawlerele Anthropic: ClaudeBot, Claude-SearchBot și Claude-User
Cei trei agenți web ai Anthropic: ce fac ClaudeBot, Claude-SearchBot și Claude-User, tokenurile lor din robots.txt și ce se schimbă când îi blochezi.
Citește articolul →Crawlere PerplexityCrawlerele Perplexity: PerplexityBot și Perplexity-User
Cei doi agenți Perplexity: ce fac PerplexityBot și Perplexity-User, pe care îl controlează robots.txt și cum îi permiți sau îi blochezi în firewall.
Citește articolul →Date structurateDate structurate pentru răspunsuri AI: ce marchezi și cum
Ce marcaje schema.org ajută răspunsurile AI să-ți citească pagina: Organization cu sameAs, Article cu dată și autor, FAQPage și Product cu preț.
Citește articolul →Redare JavaScriptPot crawlerele AI să citească conținut redat de JavaScript?
De ce conținutul redat doar de JavaScript lipsește adesea pentru crawlerele AI, cum verifici ce primesc și cum remediezi cu SSR sau HTML static.
Citește articolul →