---
title: "robots.txt | robots.txt règles pour les crawlers IA | Agent-Ready Check"
description: "robots.txt reste le seul endroit lisible par machine où un site peut énoncer sa politique d'exploration, et c'est le premier fichier qu'un agent récupère. Un fichier absent ou invalide signifie que chaque crawler devine. Pass criteria: Renvoie un HTTP 200 avec un corps en texte brut contenant au moi"
locale: fr
canonical: https://agent-ready.t0ols.com/fr/checks/robots-txt/
---

# robots.txt

> Category: Découvrabilité

robots.txt reste le seul endroit lisible par machine où un site peut énoncer sa politique d'exploration, et c'est le premier fichier qu'un agent récupère. Un fichier absent ou invalide signifie que chaque crawler devine.

## Pourquoi c'est important

Tout le reste s'appuie dessus — la référence au sitemap, les règles pour les crawlers IA et le Content Signal vivent tous dans ce fichier.

## Critères de réussite

Renvoie un HTTP 200 avec un corps en texte brut contenant au moins une directive User-agent.

## Comment la mettre en œuvre

Goal: Publish /robots.txt with clear crawl rules

Renvoie un HTTP 200 avec un corps en texte brut contenant au moins une directive User-agent.

The step-by-step implementation prompt is part of the paid tier. The free layer gives you the diagnosis, the evidence and the specification links.

Specifications: https://www.rfc-editor.org/rfc/rfc9309
Implementation notes: https://agent-ready.t0ols.com/.well-known/agent-skills/robots-txt/SKILL.md