Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Allow: /*.ico$	允许所有搜索引擎访问所有以*.ico结尾的文件
Allow: /*.png$	允许所有搜索引擎访问所有以*.png结尾的文件
Allow: /*.jpg$	允许所有搜索引擎访问所有以*.jpg结尾的文件
Allow: /*.jpeg$	允许所有搜索引擎访问所有以*.jpeg结尾的文件
Allow: /*.gif$	允许所有搜索引擎访问所有以*.gif结尾的文件
Disallow: /wp-admin/	禁止所有搜索引擎访问/wp-admin目录
Disallow: /wp-content/plugins/	禁止所有搜索引擎访问/wp-content/plugins目录
Disallow: /wp-content/themes/	禁止所有搜索引擎访问/wp-content/themes目录
Disallow: /wp-includes/	禁止所有搜索引擎访问/wp-includes目录
Disallow: /attachment/	禁止所有搜索引擎访问/attachment目录
Disallow: /?s=*	禁止所有搜索引擎访问,参数为s=*的页面
Disallow: /?*	禁止所有搜索引擎访问任何带参数的页面
Disallow: /search/	禁止所有搜索引擎访问/search目录
Disallow: /goto/	禁止所有搜索引擎访问/goto目录
Disallow: /cnto/	禁止所有搜索引擎访问/cnto目录