KI-Crawler und AEO, verständlich erklärt
Praktische Anleitungen für Website-Betreiber, Marketer und Entwickler: welche KI-Crawler es gibt, was sie lesen dürfen und wie Sie sicherstellen, dass KI-Antworten Ihre Seiten lesen und zitieren können.
Kann ChatGPT meine Website sehen? So prüfen Sie es
So prüfen Sie, ob ChatGPT Ihre Website lesen und zitieren kann: OAI-SearchBot, GPTBot, ChatGPT-User, robots.txt, Firewalls und ein schneller curl-Test.
Artikel lesen →OpenAI-CrawlerDie OpenAI-Crawler erklärt: GPTBot, OAI-SearchBot und ChatGPT-User
Was die drei Crawler von OpenAI tun, welcher robots.txt-Token was steuert und was das Sperren von GPTBot, OAI-SearchBot oder ChatGPT-User ändert.
Artikel lesen →Firewalls und CDNsBlockiert Cloudflare KI-Crawler? So finden Sie es heraus und beheben es
Warum Cloudflare und andere WAFs KI-Crawlern mit 403 oder Challenge-Seiten antworten, wie Sie das erkennen und KI-Suchcrawler sicher durchlassen.
Artikel lesen →robots.txtrobots.txt für KI-Crawler: was Sie erlauben und was Sie sperren
So schreiben Sie die robots.txt für KI-Crawler: KI-Suche erlauben, über Training entscheiden, Token je Crawler, RFC-9309-Regeln und häufige Fehler.
Artikel lesen →llms.txtWas ist llms.txt, und lohnt sie sich?
llms.txt erklärt: Vorschlag, Markdown-Format, wer sie heute liest und wie Sie in zehn Minuten eine schreiben, mit ehrlichem Blick auf die Verbreitung.
Artikel lesen →AEO-GrundlagenAEO vs. SEO: was gleich bleibt und was sich für KI-Antworten ändert
AEO im Vergleich zu SEO: was gleich bleibt, was sich für KI-Antworten ändert (Zugriff, Antwort zuerst, Entitäten, Aktualität) und eine Checkliste.
Artikel lesen →Claude-CrawlerDie Crawler von Anthropic: ClaudeBot, Claude-SearchBot und Claude-User
Die drei Web-Agenten von Anthropic: was ClaudeBot, Claude-SearchBot und Claude-User tun, ihre robots.txt-Token und was das Sperren jedes einzelnen ändert.
Artikel lesen →Perplexity-CrawlerDie Crawler von Perplexity: PerplexityBot und Perplexity-User
Die zwei Agenten von Perplexity: was PerplexityBot und Perplexity-User tun, welchen die robots.txt steuert und wie Sie sie zulassen oder sperren.
Artikel lesen →Strukturierte DatenStrukturierte Daten für KI-Antworten: was Sie auszeichnen und wie
Welches schema.org-Markup KI-Antworten beim Lesen Ihrer Seite hilft: Organization mit sameAs, Artikeldaten und Autor, FAQPage und Product mit Preis als JSON-LD.
Artikel lesen →JavaScript-RenderingKönnen KI-Crawler per JavaScript gerenderte Inhalte lesen?
Warum nur per JavaScript gerenderte Inhalte für KI-Crawler oft fehlen, wie Sie prüfen, was sie erhalten, und wie Sie es mit SSR oder statischem HTML beheben.
Artikel lesen →