Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /user/*	禁止所有搜索引擎访问/user下的所有文件
Disallow: /api/*	禁止所有搜索引擎访问/api下的所有文件
Disallow: /search?*	禁止所有搜索引擎访问search带任何参数的页面
Disallow: /r/*	禁止所有搜索引擎访问/r下的所有文件
Disallow: /n/*	禁止所有搜索引擎访问/n下的所有文件
Disallow: /reco/*	禁止所有搜索引擎访问/reco下的所有文件
Disallow: /*/edit$	禁止所有搜索引擎访问/目录下所有以edit*结尾的文件
Disallow: /*/revision$	禁止所有搜索引擎访问/目录下所有以revision*结尾的文件
Disallow: /ask	禁止所有搜索引擎访问/ask目录（包括子目录）
Disallow: /write	禁止所有搜索引擎访问/write目录（包括子目录）