Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Allow: /*.css	允许所有搜索引擎访问所有以.css为后缀的文件
Allow: /*.js	允许所有搜索引擎访问所有以.js为后缀的文件
Allow: /*.jpg	允许所有搜索引擎访问所有以.jpg为后缀的文件
Allow: /*.png	允许所有搜索引擎访问所有以.png为后缀的文件
Allow: /*.svg	允许所有搜索引擎访问所有以.svg为后缀的文件
User-agent: Googlebot	开始配置：Googlebot
Disallow: /?	禁止Googlebot访问任何带参数的页面
Allow: /*.css	允许Googlebot访问所有以.css为后缀的文件
Allow: /*.js	允许Googlebot访问所有以.js为后缀的文件
Allow: /*.jpg	允许Googlebot访问所有以.jpg为后缀的文件
Allow: /*.png	允许Googlebot访问所有以.png为后缀的文件
Allow: /*.svg	允许Googlebot访问所有以.svg为后缀的文件