Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /wp-admin/	禁止所有搜索引擎访问/wp-admin目录
Disallow: /wp-content/	禁止所有搜索引擎访问/wp-content目录
Disallow: /wp-includes	禁止所有搜索引擎访问/wp-includes目录（包括子目录）
Disallow: /themes	禁止所有搜索引擎访问/themes目录（包括子目录）
Disallow: /*.css$	禁止所有搜索引擎访问所有以*.css结尾的文件
Disallow: /*.php$	禁止所有搜索引擎访问所有以*.php结尾的文件
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /&	禁止所有搜索引擎访问所有包含&的文件
Disallow: /*.rar	禁止所有搜索引擎访问所有以.rar为后缀的文件
Disallow: /*.zip	禁止所有搜索引擎访问所有以.zip为后缀的文件
Disallow: /cgi-sys/	禁止所有搜索引擎访问/cgi-sys目录
Disallow: /img-sys/	禁止所有搜索引擎访问/img-sys目录
Disallow: /*/trackback	禁止所有搜索引擎访问*//trackback**目录（包括子目录）
Disallow: /feed	禁止所有搜索引擎访问/feed目录（包括子目录）
Disallow: /*/feed	禁止所有搜索引擎访问*//feed**目录（包括子目录）
Disallow: /comments/feed	禁止所有搜索引擎访问/comments/feed目录（包括子目录）
Allow: /wp-admin/admin-ajax.php	允许所有搜索引擎访问/wp-admin目录下的admin-ajax.php文件
sitemap:https://redpptx.com/sitemap.xml	Sitemap地址：https://redpptx.com/sitemap.xml
sitemap:https://redpptx.com/sitemap.txt	Sitemap地址：https://redpptx.com/sitemap.txt

活动推荐

Robots检测