Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /wp-admin/	禁止所有搜索引擎访问/wp-admin目录
Disallow: /author/	禁止所有搜索引擎访问/author目录
Disallow: /users/	禁止所有搜索引擎访问/users目录
Disallow: /cgi-bin	禁止所有搜索引擎访问/cgi-bin目录（包括子目录）
Disallow: /search/	禁止所有搜索引擎访问/search目录
Disallow: */wlwmanifest.xml	禁止所有搜索引擎访问目录下的wlwmanifest.xml*文件
Disallow: /xmlrpc.php	禁止所有搜索引擎访问根目录下的xmlrpc.php文件
Disallow: utm=	禁止所有搜索引擎访问根目录下以*utm=**结尾的目录（包括子目录）
Disallow: *openstat=	禁止所有搜索引擎访问根目录下以openstat=结尾的目录（包括子目录）
Sitemap: https://btk.community/sitemap.xml	Sitemap地址： https://btk.community/sitemap.xml