就绪等级与评分
等级是对 Agent 目前能用你的网站做什么的累积性描述。阶梯按顺序评估,网站停留在它完全满足的最高一级。
五个等级
等级是累积的:网站停留在所有要求都被完全满足的最高一级。要达到等级 3,必须先达到等级 2。
未就绪
尚未部署任何抓取政策或基础发现机制。
基础 Web 存在感
三项中通过两项:robots.txt、sitemap 或 Link 响应头。
- robots.txt
- Sitemap
- Link 响应头
感知机器人
在等级 1 基础上,robots.txt 中包含明确的 AI 爬虫规则和 Content Signals。
- AI 爬虫规则
- Content Signals
Agent 可读
在等级 2 基础上支持 Markdown 内容协商,让 Agent 读到干净的 Markdown。
- Markdown 内容协商
Agent 已集成
在等级 3 基础上,至少有一项可被发现的集成:MCP Server Card、A2A Agent Card、Agent Skills 索引或 API Catalog。
- MCP Server Card
- API Catalog
- Agent Skills
Agent 原生
在等级 4 基础上满足三项中的两项:可验证的机器人身份(Web Bot Auth)、已就绪的集成,以及认证元数据(OAuth 或 auth.md)。
- Web Bot Auth
- OAuth 发现
- Auth.md
部分扫描
你可以选择运行哪些检查。未运行的检查不会阻碍等级——它被跳过,而不是判定失败——因此对一个建设良好的内容站点只跑七项检查,也能得到很高的等级。结果卡片始终会标明部分扫描的确切数量,所以高分不会被误认为全部通过。
评分
0–100 的得分是已满足的可适用检查所占比例。被配置排除的检查,或对这类网站不适用的检查,会同时从分子和分母中移除;警告按半分计入。
等级标准是如何推导出来的
等级阶梯和通过标准是通过在样本网站上观察参考扫描器的实际行为反向推导出来的,随后用回归测试固定下来。当某条标准存在歧义时,选择能够复现参考结果的解释,并记录在测试中。
被排除的检查
Web Bot Auth 仅供参考:发布密钥目录等于声明你对自己发出的请求签名,因此不签名的网站不应发布它。五项商务检查仅在具有电商信号的网站上计分。
| Check | Category | Default | Scored on |
|---|---|---|---|
| robots.txt | 可发现性 | yes | every site |
| Sitemap | 可发现性 | yes | every site |
| Link 响应头 | 可发现性 | yes | every site |
| 面向 AI 发现的 DNS(DNS-AID) | 可发现性 | yes | every site |
| Markdown 内容协商 | 内容 | yes | every site |
| AI 爬虫规则 | 机器人访问控制 | yes | every site |
| Content Signals | 机器人访问控制 | yes | every site |
| Web Bot Auth | 机器人访问控制 | yes | every site (informational) |
| API Catalog | API、认证、MCP 与技能发现 | yes | every site |
| OAuth 发现 | API、认证、MCP 与技能发现 | yes | every site |
| OAuth Protected Resource | API、认证、MCP 与技能发现 | yes | every site |
| Auth.md | API、认证、MCP 与技能发现 | yes | every site |
| MCP Server Card | API、认证、MCP 与技能发现 | yes | every site |
| A2A Agent Card | API、认证、MCP 与技能发现 | opt-in | every site |
| Agent Skills | API、认证、MCP 与技能发现 | yes | every site |
| WebMCP | API、认证、MCP 与技能发现 | yes | every site |
| ARD 清单 | API、认证、MCP 与技能发现 | yes | every site |
| x402 | 商务 | yes | commerce sites only |
| MPP | 商务 | yes | commerce sites only |
| UCP | 商务 | yes | commerce sites only |
| ACP | 商务 | yes | commerce sites only |
| AP2 | 商务 | opt-in | commerce sites only |
See it on your own domain
The scanner shows its evidence for every check, so you can audit the result.