Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /admin/	禁止所有搜索引擎访问/admin目录
Disallow: /siteadmin/	禁止所有搜索引擎访问/siteadmin目录
Disallow: /wapadmin/	禁止所有搜索引擎访问/wapadmin目录
Disallow: /api/	禁止所有搜索引擎访问/api目录
Disallow: /data/	禁止所有搜索引擎访问/data目录
Disallow: /config/	禁止所有搜索引擎访问/config目录
Disallow: /install/	禁止所有搜索引擎访问/install目录
Disallow: /member/	禁止所有搜索引擎访问/member目录
Disallow: /app/	禁止所有搜索引擎访问/app目录
Disallow: /js/	禁止所有搜索引擎访问/js目录
Disallow: /weixin/	禁止所有搜索引擎访问/weixin目录
Disallow: /error/	禁止所有搜索引擎访问/error目录
Disallow: /job/search	禁止所有搜索引擎访问/job目录下包含search的文件
Disallow: /resume/search	禁止所有搜索引擎访问/resume目录下包含search的文件
Disallow: /job/all=	禁止所有搜索引擎访问/job目录下包含all=的文件
Disallow: /resume/all=	禁止所有搜索引擎访问/resume目录下包含all=的文件