Methodology

就绪等级与评分

等级是对 Agent 目前能用你的网站做什么的累积性描述。阶梯按顺序评估,网站停留在它完全满足的最高一级。

五个等级

等级是累积的:网站停留在所有要求都被完全满足的最高一级。要达到等级 3,必须先达到等级 2。

0

未就绪

尚未部署任何抓取政策或基础发现机制。

1

基础 Web 存在感

三项中通过两项:robots.txt、sitemap 或 Link 响应头。

  • robots.txt
  • Sitemap
  • Link 响应头
2

感知机器人

在等级 1 基础上,robots.txt 中包含明确的 AI 爬虫规则和 Content Signals。

  • AI 爬虫规则
  • Content Signals
3

Agent 可读

在等级 2 基础上支持 Markdown 内容协商,让 Agent 读到干净的 Markdown。

  • Markdown 内容协商
4

Agent 已集成

在等级 3 基础上,至少有一项可被发现的集成:MCP Server Card、A2A Agent Card、Agent Skills 索引或 API Catalog。

  • MCP Server Card
  • API Catalog
  • Agent Skills
5

Agent 原生

在等级 4 基础上满足三项中的两项:可验证的机器人身份(Web Bot Auth)、已就绪的集成,以及认证元数据(OAuth 或 auth.md)。

  • Web Bot Auth
  • OAuth 发现
  • Auth.md

部分扫描

你可以选择运行哪些检查。未运行的检查不会阻碍等级——它被跳过,而不是判定失败——因此对一个建设良好的内容站点只跑七项检查,也能得到很高的等级。结果卡片始终会标明部分扫描的确切数量,所以高分不会被误认为全部通过。

评分

0–100 的得分是已满足的可适用检查所占比例。被配置排除的检查,或对这类网站不适用的检查,会同时从分子和分母中移除;警告按半分计入。

等级标准是如何推导出来的

等级阶梯和通过标准是通过在样本网站上观察参考扫描器的实际行为反向推导出来的,随后用回归测试固定下来。当某条标准存在歧义时,选择能够复现参考结果的解释,并记录在测试中。

被排除的检查

Web Bot Auth 仅供参考:发布密钥目录等于声明你对自己发出的请求签名,因此不签名的网站不应发布它。五项商务检查仅在具有电商信号的网站上计分。

Every check, its category and whether it is enabled by default
CheckCategoryDefaultScored on
robots.txt 可发现性 yes every site
Sitemap 可发现性 yes every site
Link 响应头 可发现性 yes every site
面向 AI 发现的 DNS(DNS-AID) 可发现性 yes every site
Markdown 内容协商 内容 yes every site
AI 爬虫规则 机器人访问控制 yes every site
Content Signals 机器人访问控制 yes every site
Web Bot Auth 机器人访问控制 yes every site (informational)
API Catalog API、认证、MCP 与技能发现 yes every site
OAuth 发现 API、认证、MCP 与技能发现 yes every site
OAuth Protected Resource API、认证、MCP 与技能发现 yes every site
Auth.md API、认证、MCP 与技能发现 yes every site
MCP Server Card API、认证、MCP 与技能发现 yes every site
A2A Agent Card API、认证、MCP 与技能发现 opt-in every site
Agent Skills API、认证、MCP 与技能发现 yes every site
WebMCP API、认证、MCP 与技能发现 yes every site
ARD 清单 API、认证、MCP 与技能发现 yes every site
x402 商务 yes commerce sites only
MPP 商务 yes commerce sites only
UCP 商务 yes commerce sites only
ACP 商务 yes commerce sites only
AP2 商务 opt-in commerce sites only

See it on your own domain

The scanner shows its evidence for every check, so you can audit the result.

Run a scan