Robots 校验
粘贴 robots.txt,设置目标 URL 与 UA,查看判定与命中规则。
本页处理默认在浏览器本地完成;需经代理的能力会单独标注。
使用说明
- 粘贴 robots.txt 文本。
- 填写目标 URL 与 User-Agent。
- 查看判定与命中规则。结果为近似实现,非搜索引擎官方结论。
常见问题
和 Googlebot 完全一致吗?
否,仅为常见规则的近似匹配,便于调试。
数据会上传吗?
不会。
粘贴 robots.txt,设置目标 URL 与 UA,查看判定与命中规则。
本页处理默认在浏览器本地完成;需经代理的能力会单独标注。
否,仅为常见规则的近似匹配,便于调试。
不会。