---
title: "AI बॉट नियम | robots.txt AI बॉट User-agent नियम GPTBot ClaudeBot | Agent-Ready Check"
description: "GPTBot, OAI-SearchBot, ClaudeBot, Claude-SearchBot और Google-Extended जैसे क्रॉलर robots.txt पढ़ते हैं, और हर एक का अपना प्रकाशित व्यवहार है। Pass criteria: robots.txt में ज्ञात AI क्रॉलरों के नाम हैं, या ऐसा वाइल्डकार्ड ग्रुप है जो उन्हें कवर करता है।"
locale: hi
canonical: https://agent-ready.t0ols.com/hi/checks/ai-bot-rules/
---

# AI बॉट नियम

> Category: बॉट पहुँच नियंत्रण

GPTBot, OAI-SearchBot, ClaudeBot, Claude-SearchBot और Google-Extended जैसे क्रॉलर robots.txt पढ़ते हैं, और हर एक का अपना प्रकाशित व्यवहार है।

## यह क्यों मायने रखता है

नाम लेने से एक अंतर्निहित डिफ़ॉल्ट आपका जान-बूझकर लिया गया फ़ैसला बन जाता है, और आप सर्च क्रॉलरों के साथ ट्रेनिंग क्रॉलरों से अलग व्यवहार कर सकते हैं।

## पास मानदंड

robots.txt में ज्ञात AI क्रॉलरों के नाम हैं, या ऐसा वाइल्डकार्ड ग्रुप है जो उन्हें कवर करता है।

## इसे कैसे लागू करें

Goal: Add User-agent rules for AI crawlers like GPTBot, ClaudeBot, and Google-Extended

robots.txt में ज्ञात AI क्रॉलरों के नाम हैं, या ऐसा वाइल्डकार्ड ग्रुप है जो उन्हें कवर करता है।

The step-by-step implementation prompt is part of the paid tier. The free layer gives you the diagnosis, the evidence and the specification links.

Specifications: https://www.rfc-editor.org/rfc/rfc9309, https://developers.cloudflare.com/ai-crawl-control/
Implementation notes: https://agent-ready.t0ols.com/.well-known/agent-skills/ai-rules/SKILL.md