Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /d/	禁止所有搜索引擎访问/d目录
Disallow: /e/	禁止所有搜索引擎访问/e目录
Disallow: /e/class/	禁止所有搜索引擎访问/e/class目录
Disallow: /e/config/	禁止所有搜索引擎访问/e/config目录
Disallow: /e/data/	禁止所有搜索引擎访问/e/data目录
Disallow: /e/enews/	禁止所有搜索引擎访问/e/enews目录
Disallow: /e/update/	禁止所有搜索引擎访问/e/update目录
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /zuowen/tags-0-0-*.html	禁止所有搜索引擎访问/zuowen目录下的*tags-0-0-.html**文件
Disallow: /zuowen/list-0-2-16-0-0-0.html	禁止所有搜索引擎访问/zuowen目录下的list-0-2-16-0-0-0.html文件
Disallow: /zuowen/list-0-3-18-0-0-0.html	禁止所有搜索引擎访问/zuowen目录下的list-0-3-18-0-0-0.html文件
Disallow: /zuowen/list-0-4-19-0-0-0.html	禁止所有搜索引擎访问/zuowen目录下的list-0-4-19-0-0-0.html文件
Disallow: /zuowen/list-0-1-20-0-0-0.html	禁止所有搜索引擎访问/zuowen目录下的list-0-1-20-0-0-0.html文件
Disallow: /hti/	禁止所有搜索引擎访问/hti目录
Disallow: /so/	禁止所有搜索引擎访问/so目录