Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /zb_system/	禁止所有搜索引擎访问/zb_system目录
Disallow: /google/zb_system/	禁止所有搜索引擎访问/google/zb_system目录
Disallow: /weibo/zb_system/	禁止所有搜索引擎访问/weibo/zb_system目录
Disallow: /info/zb_system/	禁止所有搜索引擎访问/info/zb_system目录
Disallow: /anni/zb_system/	禁止所有搜索引擎访问/anni/zb_system目录
Disallow: /apps/zb_system/	禁止所有搜索引擎访问/apps/zb_system目录
Disallow: /story/zb_system/	禁止所有搜索引擎访问/story/zb_system目录
Disallow: /book/zb_system/	禁止所有搜索引擎访问/book/zb_system目录
Disallow: /xiaoshuo/zb_system/	禁止所有搜索引擎访问/xiaoshuo/zb_system目录
Disallow: /werther/zb_system/	禁止所有搜索引擎访问/werther/zb_system目录
Disallow: /view.asp	禁止所有搜索引擎访问根目录下的view.asp文件
User-agent: MegaIndex.ru/2.0	开始配置：MegaIndex.ru/2.0
Disallow: /	禁止MegaIndex.ru/2.0访问网站的任何部分
User-agent: MegaIndex.ru	开始配置：MegaIndex.ru
Disallow: /	禁止MegaIndex.ru访问网站的任何部分
User-agent: megaIndex.ru	开始配置：megaIndex.ru
Disallow: /	禁止megaIndex.ru访问网站的任何部分
User-agent: Seekport Crawler	开始配置：Seekport Crawler
Disallow: /	禁止Seekport Crawler访问网站的任何部分
User-agent: DotBot	开始配置：DotBot
Disallow: /	禁止DotBot访问网站的任何部分
Sitemap: https://www.williamlong.info/sitemap.xml	Sitemap地址： https://www.williamlong.info/sitemap.xml

活动推荐

Robots检测