Sitemap
sitemap के ज़रिए आप क्रॉलर को बताते हैं कि कौन-से URL मानक हैं और कब बदले, बिना उसे लिंक के पीछे-पीछे आपकी साइट खोजने पर मजबूर किए।
यह क्यों मायने रखता है
सीमित बजट वाले एजेंट उसे उन्हीं URL पर खर्च करेंगे जिनके नाम आपने बताए। कुछ न कहें तो वे अंदाज़ा लगाएँगे।
पास मानदंड
/sitemap.xml पर मान्य XML sitemap उपलब्ध है, या robots.txt में Sitemap: निर्देश से घोषित है।
जाँच जो भी अनुरोध करती है, वह सब दर्ज होता है — URL, मेथड, रिस्पॉन्स स्टेटस, संबंधित हेडर और बॉडी का प्रीव्यू — और नतीजों में उस जाँच के नीचे दिखाया जाता है।
इसे कैसे लागू करें
Publish a sitemap and reference it from robots.txt
/sitemap.xml पर मान्य XML sitemap उपलब्ध है, या robots.txt में Sitemap: निर्देश से घोषित है।
चरण-दर-चरण कार्यान्वयन निर्देश Pro प्लान का हिस्सा हैं।
प्लान देखेंअपनी साइट स्कैन करें
देखें कि यह जाँच आपके डोमेन पर पास होती है या नहीं, और साथ में बाकी 21 जाँचें भी।
संबंधित जाँचें
robots.txt
HTTP 200 के साथ plain text लौटाता है, जिसमें कम से कम एक User-agent निर्देश हो।
Link हेडर
होमपेज का रिस्पॉन्स Link हेडर के साथ आता है, जिनमें कम से कम एक एजेंट-उपयोगी relation हो।
AI खोज के लिए DNS (DNS-AID)
_agents नेमस्पेस के अंतर्गत ServiceMode SVCB/HTTPS रिकॉर्ड या TXT इंडेक्स मौजूद है, आदर्श रूप में DNSSEC से साइन किया गया।