Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent:*	开始配置：所有搜索引擎
Allow: //ask/v_.htm	允许所有搜索引擎访问*//ask目录下的v_.htm*文件
Disallow: /*/ask/	禁止所有搜索引擎访问*//ask**目录
Disallow: /*/dianping.htm	禁止所有搜索引擎访问/目录下的dianping.htm*文件
Disallow: /hangye/_.html	禁止所有搜索引擎访问/hangye目录下的_.html文件
Disallow: /gs3/	禁止所有搜索引擎访问/gs3目录
Disallow: /gs4/	禁止所有搜索引擎访问/gs4目录
Disallow: /gs6/	禁止所有搜索引擎访问/gs6目录
Disallow: /gs7/	禁止所有搜索引擎访问/gs7目录
Disallow: /gs7/	禁止所有搜索引擎访问/gs7目录
Disallow: /gs10/	禁止所有搜索引擎访问/gs10目录
Disallow: /gs13/	禁止所有搜索引擎访问/gs13目录
Disallow: /gs15/	禁止所有搜索引擎访问/gs15目录
Disallow: /gs17/	禁止所有搜索引擎访问/gs17目录
Disallow: /gs18/	禁止所有搜索引擎访问/gs18目录
Disallow: /gs147/	禁止所有搜索引擎访问/gs147目录
Disallow: /gs192/	禁止所有搜索引擎访问/gs192目录
Disallow: /gs198/	禁止所有搜索引擎访问/gs198目录
Disallow: /gs209/	禁止所有搜索引擎访问/gs209目录
Disallow: /gs219/	禁止所有搜索引擎访问/gs219目录
Disallow: /gs230/	禁止所有搜索引擎访问/gs230目录
Disallow: /gs238/	禁止所有搜索引擎访问/gs238目录
Disallow: /gs245/	禁止所有搜索引擎访问/gs245目录
Disallow: /tag/	禁止所有搜索引擎访问/tag目录
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /*utm_s=	禁止所有搜索引擎访问根目录下以utm_s=结尾的目录（包括子目录）
Disallow: /ajax/loginDetect.html	禁止所有搜索引擎访问/ajax目录下的loginDetect.html文件
Disallow: /brand/ajaxGetTop5Msg.html	禁止所有搜索引擎访问/brand目录下的ajaxGetTop5Msg.html文件
Disallow: /preview/	禁止所有搜索引擎访问/preview目录
Disallow: //htmledit/temp/	禁止所有搜索引擎访问*//htmledit/temp**下的所有文件
Disallow: /userImgfiles/	禁止所有搜索引擎访问/userImgfiles目录
Disallow: /ckfinder/userfiles/images/	禁止所有搜索引擎访问/ckfinder/userfiles/images目录
Disallow: //img.jiameng.com/*	禁止所有搜索引擎访问*//img.jiameng.com*下的所有文件
Disallow: //javascript	禁止所有搜索引擎访问/目录下以javascript*开头的目录（包括子目录）
Disallow: /img*_/	禁止所有搜索引擎访问*/img_**目录
User-agent: slurp	开始配置：slurp
Disallow: /	禁止slurp访问网站的任何部分
User-agent: msnbot	开始配置：msnbot
Disallow: /	禁止msnbot访问网站的任何部分
User-agent: YodaoBot	开始配置：YodaoBot
Disallow: /	禁止YodaoBot访问网站的任何部分
User-agent: OutfoxBot	开始配置：OutfoxBot
Disallow: /	禁止OutfoxBot访问网站的任何部分

活动推荐

Robots检测