AI-crawlers en AEO, uitgelegd
Praktische gidsen voor website-eigenaren, marketeers en ontwikkelaars: welke AI-crawlers er zijn, wat ze mogen lezen en hoe je ervoor zorgt dat AI-antwoorden je pagina's kunnen lezen en citeren.
Kan ChatGPT mijn website zien? Zo controleer je het
Zo controleer je of ChatGPT je site kan lezen en citeren: OAI-SearchBot, GPTBot, ChatGPT-User, robots.txt, firewalls en een snelle curl-test.
Artikel lezen →OpenAI-crawlersDe OpenAI-crawlers uitgelegd: GPTBot, OAI-SearchBot en ChatGPT-User
Wat de drie crawlers van OpenAI doen, welk robots.txt-token wat regelt en wat het blokkeren van GPTBot, OAI-SearchBot of ChatGPT-User voor je site verandert.
Artikel lezen →Firewalls en cdn'sBlokkeert Cloudflare AI-crawlers? Zo kom je erachter en los je het op
Waarom Cloudflare en andere WAF's AI-crawlers met 403's of challenge-pagina's beantwoorden, hoe je dat herkent en hoe je AI-zoekcrawlers veilig doorlaat.
Artikel lezen →robots.txtrobots.txt voor AI-crawlers: wat je toestaat en wat je blokkeert
Zo schrijf je robots.txt voor AI-crawlers: AI-zoeken toestaan, kiezen over training, het token per crawler, RFC 9309-regels en veelgemaakte fouten.
Artikel lezen →llms.txtWat is llms.txt, en is het de moeite waard?
llms.txt uitgelegd: wat het voorstel is, het Markdown-formaat, wie het nu leest en hoe je er in tien minuten een schrijft, met een eerlijke kijk op het gebruik.
Artikel lezen →AEO-basisAEO versus SEO: wat is hetzelfde en wat verandert er voor AI-antwoorden
AEO vergeleken met SEO: wat gelijk blijft, wat verandert voor AI-antwoorden (toegang, antwoord eerst, entiteiten, actualiteit) en een checklist.
Artikel lezen →Claude-crawlersDe crawlers van Anthropic: ClaudeBot, Claude-SearchBot en Claude-User
De drie webagents van Anthropic: wat ClaudeBot, Claude-SearchBot en Claude-User doen, hun robots.txt-tokens en wat het blokkeren van elk ervan verandert.
Artikel lezen →Perplexity-crawlersDe crawlers van Perplexity: PerplexityBot en Perplexity-User
De twee agents van Perplexity: wat PerplexityBot en Perplexity-User doen, welke door robots.txt wordt geregeld en hoe je ze toestaat of blokkeert.
Artikel lezen →Gestructureerde dataGestructureerde data voor AI-antwoorden: wat je markeert en hoe
Welke schema.org-markup AI-antwoorden helpt je pagina te lezen: Organization met sameAs, artikeldata en auteur, FAQPage en Product met prijs als JSON-LD.
Artikel lezen →JavaScript-renderingKunnen AI-crawlers door JavaScript gerenderde content lezen?
Waarom content die alleen via JavaScript verschijnt vaak ontbreekt voor AI-crawlers, hoe je dat test en oplost met SSR of statische HTML.
Artikel lezen →