Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Allow: /	允许所有搜索引擎访问网站的任何部分
Disallow: .php$	禁止所有搜索引擎访问所有以.php结尾的文件
Disallow: /*.php$	禁止所有搜索引擎访问所有以*.php结尾的文件
Disallow: /story_info.php?	禁止所有搜索引擎访问*story_info.php带任何参数的页面
Disallow: /api//	禁止所有搜索引擎访问/api/*下的所有文件
Disallow: /upyun/css/*	禁止所有搜索引擎访问/upyun/css下的所有文件
Disallow: /user	禁止所有搜索引擎访问/user目录（包括子目录）
Disallow: /js//	禁止所有搜索引擎访问/js/*下的所有文件
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /?=*	禁止所有搜索引擎访问,参数为=*的页面
Disallow: /%	禁止所有搜索引擎访问所有包含%的文件
Disallow: /%=*	禁止所有搜索引擎访问根目录下以%=开头的目录（包括子目录）