Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /Home/Search/index.html	禁止所有搜索引擎访问/Home/Search目录下的index.html文件
Disallow: /info-*.html$	禁止所有搜索引擎访问所有以*info-.html**结尾的文件
Disallow: /dev/runCode/*.html$	禁止所有搜索引擎访问/dev/runCode目录下所有以*.html结尾的文件
Disallow: /dev/Scrapy/*.html$	禁止所有搜索引擎访问/dev/Scrapy目录下所有以*.html结尾的文件
Disallow: /Home/Index/loadIndex.html	禁止所有搜索引擎访问/Home/Index目录下的loadIndex.html文件
Disallow: /Home/Index/apizl.html	禁止所有搜索引擎访问/Home/Index目录下的apizl.html文件
Disallow: /gj/dazilianxi/	禁止所有搜索引擎访问/gj/dazilianxi目录
Sitemap: https://www.toolnb.com/sitemap.xml	Sitemap地址： https://www.toolnb.com/sitemap.xml