Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: Baiduspider	开始配置：Baiduspider
Disallow: /	禁止Baiduspider访问网站的任何部分
Allow: /*.htm$	允许Baiduspider访问所有以*.htm结尾的文件
Allow: /space/viewnews-*$	允许Baiduspider访问/space目录下所有以viewnews-*结尾的文件
Allow: /psych/viewnews-*$	允许Baiduspider访问/psych目录下所有以viewnews-*结尾的文件
Allow: /space/category-*$	允许Baiduspider访问/space目录下所有以category-*结尾的文件
Allow: /psych/category-*$	允许Baiduspider访问/psych目录下所有以category-*结尾的文件
Allow: /home/space-event-id-*$	允许Baiduspider访问/home目录下所有以space-event-id-*结尾的文件
User-agent: *	开始配置：所有搜索引擎
Disallow: /7/	禁止所有搜索引擎访问/7目录
Disallow: /ghbd/	禁止所有搜索引擎访问/ghbd目录
Disallow: /uyaci/	禁止所有搜索引擎访问/uyaci目录
Disallow: /cacheData/	禁止所有搜索引擎访问/cacheData目录
Disallow: /1zj.php	禁止所有搜索引擎访问根目录下的1zj.php文件
Disallow: /2zj.php	禁止所有搜索引擎访问根目录下的2zj.php文件
Disallow: /2zfb.php\	禁止所有搜索引擎访问根目录下的2zfb.php\文件
Disallow: /psych/source/zfba/	禁止所有搜索引擎访问/psych/source/zfba目录
Disallow: /psych/zfba/	禁止所有搜索引擎访问/psych/zfba目录
Disallow: /zuowen/	禁止所有搜索引擎访问/zuowen目录
Disallow: /space/kindle/	禁止所有搜索引擎访问/space/kindle目录
Disallow: /psych/kindle/	禁止所有搜索引擎访问/psych/kindle目录
Disallow: /m.lz13.cn/	禁止所有搜索引擎访问/m.lz13.cn目录
Disallow: /zhufuyu/	禁止所有搜索引擎访问/zhufuyu目录
Disallow: /uploads/	禁止所有搜索引擎访问/uploads目录
Disallow: /uploadfile/	禁止所有搜索引擎访问/uploadfile目录
Disallow: /shiju/	禁止所有搜索引擎访问/shiju目录
Disallow: /psych/pic/list/	禁止所有搜索引擎访问/psych/pic/list目录
Disallow: /lizhigushi/	禁止所有搜索引擎访问/lizhigushi目录

活动推荐

Robots检测