स्कोर कैसे बनता है
AISeeWhy परखता है कि AI क्रॉलर और AI सर्च किसी वेब पेज को पढ़ और उद्धृत कर सकते हैं या नहीं। स्कोर पर असर डालने वाली हर चीज़ इस पेज पर है।
फ़ॉर्मूला
स्कोर = 100 − 15 × (P1 निष्कर्ष) − 6 × (P2 निष्कर्ष) − 2 × (P3 निष्कर्ष), कभी 0 से नीचे नहीं। जब स्कोर 70 या उससे ज़्यादा हो और कोई P1 निष्कर्ष न हो, तो पेज को AI के लिए दिखने वाला माना जाता है।
प्राथमिकताएँ
- P1, गंभीर: AI सर्च या AI असिस्टेंट पेज को पढ़ नहीं पाते, या उसकी बातों पर भरोसा नहीं कर पाते।
- P2, महत्वपूर्ण: पेज को समझना, ढूँढना या उद्धृत करना मुश्किल होता है।
- P3, अच्छा-हो-तो-बेहतर, या कोई नीतिगत विकल्प, जैसे ट्रेनिंग डेटा इकट्ठा करने वाले क्रॉलर को ब्लॉक करना।
क्या परखा जाता है
- पेज को 16 AI और सर्च क्रॉलर, curl और एक डेस्कटॉप ब्राउज़र के रूप में फ़ेच किया जाता है, हर क्रॉलर के प्रकाशित user agent के साथ। जिस क्रॉलर को गड़बड़ी, चैलेंज या ब्राउज़र से अलग पेज मिलता है, उसकी रिपोर्ट HTTP स्टेटस और फ़ायरवॉल के सिग्नेचर के साथ दी जाती है।
- robots.txt को RFC 9309 के अनुसार हर क्रॉलर टोकन के लिए पार्स किया जाता है, उन टोकनों सहित जो कभी user agent के रूप में नहीं भेजे जाते (Google-Extended, Applebot-Extended)।
- पेज का स्ट्रक्चर्ड डेटा (JSON-LD), जवाब-पहले वाला कंटेंट, तारीखें, sitemap, hreflang विकल्प और llms.txt जाँचे जाते हैं।
- जिस क्रॉलर को अस्थायी विफलता (नेटवर्क गड़बड़ी, 429, 5xx) मिलती है, उसे गिनने से पहले एक बार फिर आज़माया जाता है।
बाहरी टेस्ट की सीमाएँ
- अनुरोध AISeeWhy के सर्वर से आते हैं, क्रॉलर के मालिकों के IP पतों से नहीं। जो फ़ायरवॉल असली क्रॉलर पर IP से भरोसा करता है, वह हमें ब्लॉक करके उन्हें आने दे सकता है, और इसका उल्टा भी हो सकता है। सर्वर-लॉग जाँच दिखाती है कि असली क्रॉलर को क्या जवाब मिला।
- JavaScript नहीं चलाया जाता, क्योंकि AI क्रॉलर इसे नहीं चलाते।
- एक URL एक पेज है। पूरी साइट के लिए बैच ऑडिट या sitemap इस्तेमाल करें।
- बेहतर स्कोर का मतलब है कम तकनीकी रुकावटें। यह गारंटी नहीं देता कि कोई AI असिस्टेंट आपका ज़िक्र करेगा या आपको उद्धृत करेगा।
नियम
नियमों का मौजूदा संस्करण: 2026.11। जब भी कोई नियम, प्राथमिकता या फ़ॉर्मूला बदलता है, संस्करण बदल जाता है, और हर रिपोर्ट वह संस्करण दिखाती है जिससे वह बनी थी।