Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /wp-admin/	禁止所有搜索引擎访问/wp-admin目录
Disallow: /wp-includes/	禁止所有搜索引擎访问/wp-includes目录
Disallow: //comment-page-	禁止所有搜索引擎访问/目录下以comment-page-*开头的目录（包括子目录）
Disallow: /?a=*	禁止所有搜索引擎访问,参数为a=*的页面
Disallow: /?replytocom=	禁止所有搜索引擎访问所有带参数为replytocom=*的页面
Disallow: //page/*	禁止所有搜索引擎访问*//page*下的所有文件
Disallow: /category/*/page/	禁止所有搜索引擎访问*/category//page**目录
Disallow: /tag/*/page/	禁止所有搜索引擎访问*/tag//page**目录
Disallow: /*/trackback	禁止所有搜索引擎访问*//trackback**目录（包括子目录）
Disallow: /feed	禁止所有搜索引擎访问/feed目录（包括子目录）
Disallow: /*/feed	禁止所有搜索引擎访问*//feed**目录（包括子目录）
Disallow: /comments/feed	禁止所有搜索引擎访问/comments/feed目录（包括子目录）
Disallow: /?s=*	禁止所有搜索引擎访问,参数为s=*的页面
Disallow: //?s=\	禁止所有搜索引擎访问,参数为*s=\**的页面
Disallow: /attachment/	禁止所有搜索引擎访问/attachment目录
Disallow: /demo/	禁止所有搜索引擎访问/demo目录
Disallow: /docs/	禁止所有搜索引擎访问/docs目录
Disallow: /a=	禁止所有搜索引擎访问所有包含a=的文件