Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Sitemap:https://www.guidechem.com/sitemap.xml	Sitemap地址：https://www.guidechem.com/sitemap.xml
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /buyinfo/inquiry-*.html	禁止所有搜索引擎访问/buyinfo目录下的*inquiry-.html**文件
Disallow: /product/complaint.jsp	禁止所有搜索引擎访问/product目录下的complaint.jsp文件
Disallow: /inquiry.jsp	禁止所有搜索引擎访问根目录下的inquiry.jsp文件
Disallow: /amp/*	禁止所有搜索引擎访问/amp下的所有文件
Disallow: /dictionary/cn/	禁止所有搜索引擎访问/dictionary/cn目录
User-agent: BLEXBot	开始配置：BLEXBot
Disallow: /	禁止BLEXBot访问网站的任何部分
User-agent:SemrushBot	开始配置：SemrushBot
Disallow: /	禁止SemrushBot访问网站的任何部分