Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /data/	禁止所有搜索引擎访问/data目录
Disallow: /themes/	禁止所有搜索引擎访问/themes目录
Disallow: /login/	禁止所有搜索引擎访问/login目录
Disallow: /register/	禁止所有搜索引擎访问/register目录
Disallow: /price/	禁止所有搜索引擎访问/price目录
Disallow: /legal/	禁止所有搜索引擎访问/legal目录
Disallow: /privacy/	禁止所有搜索引擎访问/privacy目录
Disallow: /job/	禁止所有搜索引擎访问/job目录
Disallow: /ucenter/	禁止所有搜索引擎访问/ucenter目录
Disallow: /box/	禁止所有搜索引擎访问/box目录
Disallow: /aid/	禁止所有搜索引擎访问*/aid下的所有文件
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /?s*	禁止所有搜索引擎访问,参数为s*的页面
Disallow: /?s	禁止所有搜索引擎访问所有带参数为s*的页面
Disallow: /?f*	禁止所有搜索引擎访问,参数为f*的页面
Disallow: /?f	禁止所有搜索引擎访问所有带参数为f*的页面
Disallow: /?bd*	禁止所有搜索引擎访问,参数为bd*的页面
Disallow: /?bd	禁止所有搜索引擎访问所有带参数为bd*的页面
Disallow: /suzhougongxin	禁止所有搜索引擎访问/suzhougongxin目录（包括子目录）
Disallow: /suzhougongxin/*	禁止所有搜索引擎访问/suzhougongxin下的所有文件
Disallow: #errcode	禁止所有搜索引擎访问#errcode目录（包括子目录）
Disallow: ?apiid=*	禁止所有搜索引擎访问,参数为apiid=*的页面
Sitemap: https://www.juhe.cn/staticpage/sitemap.xml	Sitemap地址： https://www.juhe.cn/staticpage/sitemap.xml

活动推荐

Robots检测