Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Allow: /	允许所有搜索引擎访问网站的任何部分
Allow: /?$	允许所有搜索引擎访问所有以?结尾的文件
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /api/	禁止所有搜索引擎访问/api目录
Disallow: /Api/	禁止所有搜索引擎访问/Api目录
Disallow: /apis/	禁止所有搜索引擎访问/apis目录
Disallow: /Apis/	禁止所有搜索引擎访问/Apis目录
Disallow: /news/	禁止所有搜索引擎访问/news目录
Disallow: /news/*	禁止所有搜索引擎访问/news下的所有文件
Disallow: /wx_authorization.html	禁止所有搜索引擎访问根目录下的wx_authorization.html文件
Disallow: /vas/	禁止所有搜索引擎访问/vas目录
Disallow: /p/	禁止所有搜索引擎访问/p目录
Disallow: /file/vas/	禁止所有搜索引擎访问/file/vas目录
Disallow: /biz/freeshow/*	禁止所有搜索引擎访问/biz/freeshow下的所有文件
Disallow: /user/	禁止所有搜索引擎访问/user目录
Disallow: /User/	禁止所有搜索引擎访问/User目录
Disallow: /share/*	禁止所有搜索引擎访问/share下的所有文件
Disallow: /Share/*	禁止所有搜索引擎访问/Share下的所有文件
Disallow: /redirect.html	禁止所有搜索引擎访问根目录下的redirect.html文件
Sitemap: https://cli.im/sitemap.xml	Sitemap地址： https://cli.im/sitemap.xml