GPTBot

OpenAI · AI ತರಬೇತಿ

GPTBot ಎಂಬುದು OpenAI ನ ಜನರೇಟಿವ್ AI foundation ಮಾದರಿಗಳ ತರಬೇತಿಗೆ ಬಳಸಬಹುದಾದ ವಿಷಯಕ್ಕಾಗಿ ಇರುವ ಕ್ರಾಲರ್. robots.txt ನಲ್ಲಿ ಇದನ್ನು ನಿಷೇಧಿಸಿದರೆ ನಿಮ್ಮ ವಿಷಯವನ್ನು ತರಬೇತಿಗೆ ಬಳಸಬೇಡಿ ಎಂದು OpenAI ಗೆ ತಿಳಿಸುತ್ತದೆ. ಇದನ್ನು ತಡೆಯುವುದರಿಂದ ನೀವು ChatGPT ಹುಡುಕಾಟ ಉತ್ತರಗಳಿಂದ ಹೊರಗುಳಿಯುವುದಿಲ್ಲ, ಅವು OAI-SearchBot ಮೇಲೆ ಅವಲಂಬಿತವಾಗಿವೆ.

ಇದನ್ನು ಹೇಗೆ ಅನುಮತಿಸುವುದು

User-agent: GPTBot
Allow: /

ಇದನ್ನು ಹೇಗೆ ತಡೆಯುವುದು

User-agent: GPTBot
Disallow: /

ಇದು ಏನು ಮಾಡುತ್ತದೆ

GPTBot ಅನ್ನು ತನ್ನ ಜನರೇಟಿವ್ AI foundation ಮಾದರಿಗಳನ್ನು ಹೆಚ್ಚು ಉಪಯುಕ್ತ ಮತ್ತು ಸುರಕ್ಷಿತವಾಗಿಸಲು ಬಳಸಲಾಗುತ್ತದೆ ಎಂದು OpenAI ಹೇಳುತ್ತದೆ. ಅದು ಆ ಮಾದರಿಗಳ ತರಬೇತಿಯಲ್ಲಿ ಬಳಸಬಹುದಾದ ವಿಷಯವನ್ನು ಕ್ರಾಲ್ ಮಾಡುತ್ತದೆ, ಮತ್ತು GPTBot ಅನ್ನು ನಿಷೇಧಿಸುವುದು ಸೈಟ್‌ನ ವಿಷಯವನ್ನು ತರಬೇತಿಯಲ್ಲಿ ಬಳಸಬಾರದು ಎಂದು ಸೂಚಿಸುತ್ತದೆ.

ಇದನ್ನು ಅನುಮತಿಸಬೇಕೇ ಎಂಬುದು ಗೋಚರತೆಯ ನಿರ್ಧಾರವಲ್ಲ, ನೀತಿಯ ನಿರ್ಧಾರ. ChatGPT ಹುಡುಕಾಟ OAI-SearchBot ಎಂಬ ಪ್ರತ್ಯೇಕ ಕ್ರಾಲರ್ ಬಳಸುತ್ತದೆ, ಮತ್ತು OpenAI ಈ ಎರಡು ಸೆಟ್ಟಿಂಗ್‌ಗಳನ್ನು ಸ್ವತಂತ್ರವೆಂದು ದಾಖಲಿಸುತ್ತದೆ. ಎರಡನ್ನೂ ಅನುಮತಿಸಿದಾಗ, ಎರಡು ಬಾರಿ ಕ್ರಾಲ್ ಮಾಡುವುದನ್ನು ತಪ್ಪಿಸಲು ಒಂದು ಕ್ರಾಲ್‌ನ ಫಲಿತಾಂಶಗಳನ್ನು ಎರಡೂ ಉದ್ದೇಶಗಳಿಗೆ ಬಳಸಬಹುದು ಎಂದು OpenAI ಹೇಳುತ್ತದೆ.

ನಮ್ಮ 2026-11 ಅಧ್ಯಯನದಲ್ಲಿ, robots.txt ಇರುವ ಜನಪ್ರಿಯ ಸೈಟ್‌ಗಳಲ್ಲಿ 21.4% ಇದನ್ನು ತಡೆದಿದ್ದವು. →

robots.txt ಟೋಕನ್

GPTBot

User-agent ಸ್ಟ್ರಿಂಗ್

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbot

ನಿಜವಾದ ಭೇಟಿಗಳನ್ನು ಹೇಗೆ ಪರಿಶೀಲಿಸುವುದು

OpenAI ಈ ಏಜೆಂಟ್ ಬಳಸುವ IP ಶ್ರೇಣಿಗಳನ್ನು JSON ಫೈಲ್ ಆಗಿ ಪ್ರಕಟಿಸುತ್ತದೆ. ವಿನಂತಿಯ ಮೂಲ IP ಅನ್ನು ಆ ಶ್ರೇಣಿಗಳೊಂದಿಗೆ ಹೊಂದಿಸಿ ನೋಡಿ; GPTBot ಎಂದು ಹೆಸರಿಸಿಕೊಂಡು ಬೇರೆ ವಿಳಾಸದಿಂದ ಬರುವ ವಿನಂತಿ OpenAI ನಿಂದ ಬಂದದ್ದಲ್ಲ. user agent ನಲ್ಲಿನ ಆವೃತ್ತಿ ಸಂಖ್ಯೆ ಬದಲಾಗಬಹುದು ಎಂದು OpenAI ಹೇಳುತ್ತದೆ, ಆದ್ದರಿಂದ ಪೂರ್ಣ ಸ್ಟ್ರಿಂಗ್ ಬದಲು GPTBot ಟೋಕನ್ ಅನ್ನು ಹೊಂದಿಸಿ.

ನಿಮ್ಮ ಸೈಟ್ ಇದನ್ನು ಒಳಗೆ ಬಿಡುತ್ತದೆಯೇ ಎಂದು ಪರಿಶೀಲಿಸಿ →

OpenAI ಕ್ರಾಲರ್‌ಗಳ ವಿವರಣೆ: GPTBot, OAI-SearchBot ಮತ್ತು ChatGPT-User →