Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-Agent: *	开始配置：所有搜索引擎
Allow: /	允许所有搜索引擎访问网站的任何部分
Disallow: /*.asp$	禁止所有搜索引擎访问所有以*.asp结尾的文件
Disallow: /help/	禁止所有搜索引擎访问/help目录
Disallow: /about/	禁止所有搜索引擎访问/about目录
Allow: /about/map.htm	允许所有搜索引擎访问/about目录下的map.htm文件
Disallow: /jiucuo/	禁止所有搜索引擎访问/jiucuo目录
Disallow: /images/	禁止所有搜索引擎访问/images目录
Disallow: /images_bjy/	禁止所有搜索引擎访问/images_bjy目录
Disallow: /images_wxy/	禁止所有搜索引擎访问/images_wxy目录
Disallow: /Images2.0/	禁止所有搜索引擎访问/Images2.0目录
Disallow: /Images3.0/	禁止所有搜索引擎访问/Images3.0目录
Disallow: /zikao/images/	禁止所有搜索引擎访问/zikao/images目录
Disallow: /img/	禁止所有搜索引擎访问/img目录
Disallow: /ggao/	禁止所有搜索引擎访问/ggao目录
Disallow: /so/	禁止所有搜索引擎访问/so目录
Disallow: /ddc*	禁止所有搜索引擎访问根目录下以ddc开头的目录（包括子目录）
Disallow: /uid*	禁止所有搜索引擎访问根目录下以uid开头的目录（包括子目录）
Disallow: /.shtml	禁止所有搜索引擎访问所有以.shtml为后缀的文件
Disallow: /mba/	禁止所有搜索引擎访问/mba目录
Disallow: /yuys/gonggao/574847/	禁止所有搜索引擎访问/yuys/gonggao/574847目录
Disallow: /tujian/gonggao/879819/	禁止所有搜索引擎访问/tujian/gonggao/879819目录
Disallow: /ms/	禁止所有搜索引擎访问/ms目录
Disallow: /dianqi/	禁止所有搜索引擎访问/dianqi目录
Disallow: /flgw/	禁止所有搜索引擎访问/flgw目录

活动推荐

Robots检测