Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-Agent: *	开始配置：所有搜索引擎
Allow: /sitemap.xml	允许所有搜索引擎访问根目录下的sitemap.xml文件
Allow: /sitemap.html	允许所有搜索引擎访问根目录下的sitemap.html文件
Allow: /sitemap_baidu.xml	允许所有搜索引擎访问根目录下的sitemap_baidu.xml文件
Disallow: /?P=*	禁止所有搜索引擎访问,参数为P=*的页面
Disallow: /?r=*	禁止所有搜索引擎访问,参数为r=*的页面
Disallow: /wp-includes/	禁止所有搜索引擎访问/wp-includes目录
Disallow: /wp-admin/	禁止所有搜索引擎访问/wp-admin目录
Disallow: /wp-content/plugins/	禁止所有搜索引擎访问/wp-content/plugins目录
Disallow: /wp-content/themes/	禁止所有搜索引擎访问/wp-content/themes目录
Disallow: /wp-content/cache/	禁止所有搜索引擎访问/wp-content/cache目录