Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent:bingbot	开始配置：bingbot
Disallow: /	禁止bingbot访问网站的任何部分
User-agent:googlebot	开始配置：googlebot
Disallow: /	禁止googlebot访问网站的任何部分
User-agent:AlphaBot	开始配置：AlphaBot
Disallow: /	禁止AlphaBot访问网站的任何部分
User-agent:Wotbox	开始配置：Wotbox
Disallow: /	禁止Wotbox访问网站的任何部分
User-agent:MegaIndex	开始配置：MegaIndex
Disallow: /	禁止MegaIndex访问网站的任何部分
User-agent:SafeDNSBot	开始配置：SafeDNSBot
Disallow: /	禁止SafeDNSBot访问网站的任何部分
User-agent:Exabot	开始配置：Exabot
Disallow: /	禁止Exabot访问网站的任何部分
User-agent:oBot	开始配置：oBot
Disallow: /	禁止oBot访问网站的任何部分
User-agent:DotBot	开始配置：DotBot
Disallow: /	禁止DotBot访问网站的任何部分
User-agent:JikeSpider	开始配置：JikeSpider
Disallow: /	禁止JikeSpider访问网站的任何部分
User-agent:mj12bot	开始配置：mj12bot
Disallow: /	禁止mj12bot访问网站的任何部分
User-agent:YandexBot	开始配置：YandexBot
Disallow: /	禁止YandexBot访问网站的任何部分
User-agent:AhrefsBot	开始配置：AhrefsBot
Disallow: /	禁止AhrefsBot访问网站的任何部分
User-agent:DeuSu	开始配置：DeuSu
Disallow: /	禁止DeuSu访问网站的任何部分
User-agent:grapeshot	开始配置：grapeshot
Disallow: /	禁止grapeshot访问网站的任何部分
User-agent:SemrushBot	开始配置：SemrushBot
Disallow: /	禁止SemrushBot访问网站的任何部分
User-agent: *	开始配置：所有搜索引擎
Allow: /	允许所有搜索引擎访问网站的任何部分

活动推荐

Robots检测