Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Allow: /	允许所有搜索引擎访问网站的任何部分
Disallow: /Users-*.html	禁止所有搜索引擎访问根目录下的*Users-.html**文件
Disallow: /ad*	禁止所有搜索引擎访问根目录下以ad开头的目录（包括子目录）
Disallow: /?*	禁止所有搜索引擎访问任何带参数的页面
Disallow: www.jinglingdaili.com/News-getList-id-197.html	禁止所有搜索引擎访问www.jinglingdaili.com目录下的News-getList-id-197.html文件
Disallow: www.jinglingdaili.com/?referer=djjl	禁止所有搜索引擎访问,参数为referer=djjl的页面
Disallow: http://www.jinglingdaili.com/Shop-index.html?tdsourcetag=s_pctim_aiomsg	禁止所有搜索引擎访问http目录（包括子目录）
Disallow: http://www.jinglingdaili.com/?p=1	禁止所有搜索引擎访问http目录（包括子目录）
Disallow: http://www.jinglingdaili.com/Index-help-help_type-activity.html	禁止所有搜索引擎访问http目录（包括子目录）
Sitemap: http://www.jinglingdaili.com/sitemap.xml	Sitemap地址： http://www.jinglingdaili.com/sitemap.xml