GPTBot
A GPTBot az OpenAI crawlere olyan tartalmakhoz, amelyeket generatív AI-alapmodelljeinek tanítására használhatnak fel. Ha a robots.txt-ben letiltja, azzal jelzi az OpenAI-nak, hogy ne használja fel a tartalmát tanításra. A letiltás nem távolítja el Önt a ChatGPT keresési válaszaiból, amelyek az OAI-SearchBottól függenek.
Mit csinál
Az OpenAI szerint a GPTBot arra szolgál, hogy generatív AI-alapmodelljeit hasznosabbá és biztonságosabbá tegye. Olyan tartalmakat gyűjt, amelyeket ezeknek a modelleknek a tanításához használhatnak, és a GPTBot letiltása azt jelzi, hogy a webhely tartalmát nem szabad tanításra felhasználni.
Az engedélyezés szabályzati döntés, nem láthatósági kérdés. A ChatGPT keresése külön crawlert használ, az OAI-SearchBotot, és az OpenAI a két beállítást egymástól függetlennek dokumentálja. Ha mindkettő engedélyezett, az OpenAI szerint az egyik bejárás eredményét mindkét célra felhasználhatja, hogy elkerülje a kétszeri bejárást.
A 2026-11 havi vizsgálatunkban a robots.txt-vel rendelkező népszerű webhelyek 21.4% letiltotta. →
robots.txt token
GPTBot
User-agent karakterlánc
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbotHogyan engedélyezheti
User-agent: GPTBot
Allow: /Hogyan tilthatja le
User-agent: GPTBot
Disallow: /Hogyan ellenőrizheti a valódi látogatásokat
Az OpenAI JSON-fájlként közzéteszi az ügynök által használt IP-tartományokat. Vesse össze a kérés forrás-IP-címét ezekkel a tartományokkal; ha egy kérés a GPTBot nevet használja, de más címről érkezik, nem az OpenAI-tól jön. Az OpenAI jelzi, hogy a user agentben szereplő verziószám változhat, ezért a teljes karakterlánc helyett a GPTBot tokenre szűrjön.
Ellenőrizze, beengedi-e a webhelye →
Az OpenAI crawlerei: GPTBot, OAI-SearchBot és ChatGPT-User →