Crawler di IA e AEO, spiegati bene

Guide pratiche per proprietari di siti, marketer e sviluppatori: quali crawler di IA esistono, che cosa possono leggere e come fare in modo che le risposte dell'IA possano leggere e citare le tue pagine.

Accesso di ChatGPT

ChatGPT riesce a vedere il tuo sito? Come verificarlo

Come verificare se ChatGPT può leggere e citare il tuo sito: OAI-SearchBot, GPTBot e ChatGPT-User, robots.txt, firewall e un rapido test con curl.

Leggi l'articolo →Crawler di OpenAI

I crawler di OpenAI spiegati: GPTBot, OAI-SearchBot e ChatGPT-User

Che cosa fanno i tre crawler di OpenAI, quale token del robots.txt controlla cosa e che cosa cambia bloccando GPTBot, OAI-SearchBot o ChatGPT-User.

Leggi l'articolo →Firewall e CDN

Cloudflare blocca i crawler di IA? Come scoprirlo e risolvere

Perché Cloudflare e altri WAF rispondono ai crawler di IA con 403 o pagine di verifica, come accorgersene e come far passare in sicurezza i crawler di ricerca.

Leggi l'articolo →robots.txt

robots.txt per i crawler di IA: cosa consentire, cosa bloccare

Come scrivere il robots.txt per i crawler di IA: consentire la ricerca, decidere sull'addestramento, il token di ciascuno, la RFC 9309 e gli errori più comuni.

Leggi l'articolo →llms.txt

Che cos'è llms.txt e vale la pena aggiungerlo?

llms.txt spiegato: che cos'è la proposta, il formato Markdown, chi lo legge oggi e come scriverne uno in dieci minuti, con uno sguardo onesto all'adozione.

Leggi l'articolo →Nozioni di base sull'AEO

AEO e SEO: cosa è uguale e cosa cambia per le risposte dell'IA

AEO a confronto con la SEO: cosa resta uguale, cosa cambia per le risposte dell'IA (accesso, risposta in apertura, entità, aggiornamento) e una checklist.

Leggi l'articolo →Crawler di Claude

I crawler di Anthropic: ClaudeBot, Claude-SearchBot e Claude-User

I tre agenti web di Anthropic: cosa fanno ClaudeBot, Claude-SearchBot e Claude-User, i loro token del robots.txt e cosa cambia bloccando ciascuno.

Leggi l'articolo →Crawler di Perplexity

I crawler di Perplexity: PerplexityBot e Perplexity-User

I due agenti di Perplexity: cosa fanno PerplexityBot e Perplexity-User, quale è controllato dal robots.txt e come consentirli o bloccarli nel firewall.

Leggi l'articolo →Dati strutturati

Dati strutturati per le risposte dell'IA: cosa marcare e come

Quale markup schema.org aiuta le risposte dell'IA a leggere la tua pagina: Organization con sameAs, date e autore di Article, FAQPage e Product con prezzo.

Leggi l'articolo →Rendering JavaScript

I crawler di IA riescono a leggere i contenuti generati da JavaScript?

Perché i contenuti generati solo da JavaScript spesso mancano ai crawler di IA, come verificare cosa ricevono e come risolvere con SSR o HTML statico.

Leggi l'articolo →