Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /report	禁止所有搜索引擎访问/report目录（包括子目录）
Disallow: /slave	禁止所有搜索引擎访问/slave目录（包括子目录）
Disallow: /online	禁止所有搜索引擎访问/online目录（包括子目录）
Disallow: /view	禁止所有搜索引擎访问/view目录（包括子目录）
Disallow: /down	禁止所有搜索引擎访问/down目录（包括子目录）
Disallow: /layoutsample	禁止所有搜索引擎访问/layoutsample目录（包括子目录）
Disallow: /sem	禁止所有搜索引擎访问/sem目录（包括子目录）
Disallow: /?*	禁止所有搜索引擎访问任何带参数的页面
sitemap: https://www.paperfree.cn/sitemap.xml	Sitemap地址： https://www.paperfree.cn/sitemap.xml