Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent:*	开始配置：所有搜索引擎
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /%	禁止所有搜索引擎访问所有包含%的文件
Disallow: /php	禁止所有搜索引擎访问所有包含php的文件
Disallow: //list---.html	禁止所有搜索引擎访问/目录下的list---.html**文件
Disallow: //list--o*.html	禁止所有搜索引擎访问/目录下的list--o.html*文件
Disallow: /layouts/layout3/scripts/ft-carousel.min.js	禁止所有搜索引擎访问/layouts/layout3/scripts目录下的ft-carousel.min.js文件
Disallow: /news/mip/*.html	禁止所有搜索引擎访问/news/mip目录下所有以.html为后缀的文件
Disallow: /product/mip/*.html	禁止所有搜索引擎访问/product/mip目录下所有以.html为后缀的文件
Disallow: /news/gongsixinwen.html	禁止所有搜索引擎访问/news目录下的gongsixinwen.html文件
User-agent: YisouSpider	开始配置：YisouSpider
Disallow: /	禁止YisouSpider访问网站的任何部分
User-agent: AhrefsBot	开始配置：AhrefsBot
Disallow: /	禁止AhrefsBot访问网站的任何部分
User-agent: SemrushBot	开始配置：SemrushBot
Disallow: /	禁止SemrushBot访问网站的任何部分
User-agent: Yandex	开始配置：Yandex
Disallow: /	禁止Yandex访问网站的任何部分
User-agent: dotbot	开始配置：dotbot
Disallow: /	禁止dotbot访问网站的任何部分
Sitemap: http://www.juda.cn/sitemap.xml	Sitemap地址： http://www.juda.cn/sitemap.xml

活动推荐

Robots检测