可发现性
Sitemap
sitemap 用来告诉爬虫哪些 URL 是规范地址、何时发生变更,而不必让爬虫靠跟踪链接来发现你的网站。
为什么重要
有时间预算的 Agent 只会把它花在你明确列出的 URL 上;什么都不说,它就只能猜。
通过标准
在 /sitemap.xml 提供有效的 XML sitemap,或在 robots.txt 中用 Sitemap: 指令声明。
扫描器会记录什么
检查发出的每个请求都会被记录——URL、方法、响应状态、相关响应头和正文预览——并展示在结果中对应的检查项下。
检查发出的每个请求都会被记录——URL、方法、响应状态、相关响应头和正文预览——并展示在结果中对应的检查项下。
如何实施
Publish a sitemap and reference it from robots.txt
在 /sitemap.xml 提供有效的 XML sitemap,或在 robots.txt 中用 Sitemap: 指令声明。
分步实施提示词属于 Pro 计划。
查看计划扫描你的网站
看看这项检查在你的域名上是否通过,以及另外 21 项的表现。