Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Allow: /	允许所有搜索引擎访问网站的任何部分
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /*.js$	禁止所有搜索引擎访问所有以*.js结尾的文件
Disallow: /*.css$	禁止所有搜索引擎访问所有以*.css结尾的文件
Disallow: /bbs/	禁止所有搜索引擎访问/bbs目录
Disallow: /tag/	禁止所有搜索引擎访问/tag目录
Disallow: /photo/pic	禁止所有搜索引擎访问/photo/pic目录（包括子目录）
Disallow: /ask/user/	禁止所有搜索引擎访问/ask/user目录
Disallow: /ask/q31	禁止所有搜索引擎访问/ask/q31目录（包括子目录）
Disallow: /ask2/	禁止所有搜索引擎访问/ask2目录
Disallow: /baike/	禁止所有搜索引擎访问/baike目录
Disallow: /baby/yahoo/	禁止所有搜索引擎访问/baby/yahoo目录
Disallow: /dazahui/	禁止所有搜索引擎访问/dazahui目录
Disallow: /zixun/	禁止所有搜索引擎访问/zixun目录
Disallow: /game/	禁止所有搜索引擎访问/game目录
Disallow: /zone/	禁止所有搜索引擎访问/zone目录
Disallow: /q/thread/	禁止所有搜索引擎访问/q/thread目录
Disallow: /hz/	禁止所有搜索引擎访问/hz目录
Disallow: /q/topic/find/	禁止所有搜索引擎访问/q/topic/find目录