बॉट पहुँच नियंत्रण
Content Signals
robots.txt जवाब देता है “क्या आप क्रॉल कर सकते हैं”। Content Signals उस सवाल का जवाब देता है जिसके लिए वह कभी बनाया ही नहीं गया था: “क्या आप इसका इस्तेमाल ट्रेनिंग, लाइव जवाबों और इंडेक्सिंग के लिए कर सकते हैं”।
यह क्यों मायने रखता है
तीन पंक्तियों में आप कह सकते हैं कि जवाब में उद्धृत होना हाँ है और ट्रेनिंग के लिए इस्तेमाल ना, और यह हर क्रॉलर पढ़ सकता है।
पास मानदंड
robots.txt में ai-train, search और ai-input को कवर करने वाली Content-Signal प्राथमिकताएँ घोषित हैं।
स्कैनर क्या दर्ज करता है
जाँच जो भी अनुरोध करती है, वह सब दर्ज होता है — URL, मेथड, रिस्पॉन्स स्टेटस, संबंधित हेडर और बॉडी का प्रीव्यू — और नतीजों में उस जाँच के नीचे दिखाया जाता है।
जाँच जो भी अनुरोध करती है, वह सब दर्ज होता है — URL, मेथड, रिस्पॉन्स स्टेटस, संबंधित हेडर और बॉडी का प्रीव्यू — और नतीजों में उस जाँच के नीचे दिखाया जाता है।
इसे कैसे लागू करें
Declare AI content usage preferences with Content Signals in robots.txt
robots.txt में ai-train, search और ai-input को कवर करने वाली Content-Signal प्राथमिकताएँ घोषित हैं।
चरण-दर-चरण कार्यान्वयन निर्देश Pro प्लान का हिस्सा हैं।
प्लान देखेंअपनी साइट स्कैन करें
देखें कि यह जाँच आपके डोमेन पर पास होती है या नहीं, और साथ में बाकी 21 जाँचें भी।