Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /buy/	禁止所有搜索引擎访问/buy目录
Disallow: /api/	禁止所有搜索引擎访问/api目录
Disallow: /install/	禁止所有搜索引擎访问/install目录
Disallow: /member	禁止所有搜索引擎访问/member目录（包括子目录）
Disallow: /skin/	禁止所有搜索引擎访问/skin目录
Disallow: /template	禁止所有搜索引擎访问/template目录（包括子目录）
Disallow: /upgrade/	禁止所有搜索引擎访问/upgrade目录
Disallow: /*.shtml	禁止所有搜索引擎访问所有以.shtml为后缀的文件
Disallow: /plus	禁止所有搜索引擎访问/plus目录（包括子目录）
Disallow: /data	禁止所有搜索引擎访问/data目录（包括子目录）
Disallow: /*.css	禁止所有搜索引擎访问所有以.css为后缀的文件
User-agent: yisouspider	开始配置：yisouspider
Disallow: /	禁止yisouspider访问网站的任何部分
User-agent: YisouSpider	开始配置：YisouSpider
Disallow: /	禁止YisouSpider访问网站的任何部分
User-agent: SemrushBot	开始配置：SemrushBot
Disallow: /	禁止SemrushBot访问网站的任何部分
User-agent: AhrefsBot	开始配置：AhrefsBot
Disallow: /	禁止AhrefsBot访问网站的任何部分
User-agent: BLEXBot	开始配置：BLEXBot
Disallow: /	禁止BLEXBot访问网站的任何部分
User-agent: Sogou Pic Spider	开始配置：Sogou Pic Spider
Disallow: /	禁止Sogou Pic Spider访问网站的任何部分
Sitemap: https://www.dn160.com/sitemaps.xml	Sitemap地址： https://www.dn160.com/sitemaps.xml

活动推荐

Robots检测