Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /Question/AddHistory/	禁止所有搜索引擎访问/Question/AddHistory目录
User-agent:360Spider	开始配置：360Spider
Disallow: /Search	禁止360Spider访问/Search目录（包括子目录）
Disallow: /search	禁止360Spider访问/search目录（包括子目录）
Disallow: /Instance	禁止360Spider访问/Instance目录（包括子目录）
Disallow: /instance	禁止360Spider访问/instance目录（包括子目录）
User-agent:HaoSouSpider	开始配置：HaoSouSpider
Disallow: /Search	禁止HaoSouSpider访问/Search目录（包括子目录）
Disallow: /search	禁止HaoSouSpider访问/search目录（包括子目录）
Disallow: /Instance	禁止HaoSouSpider访问/Instance目录（包括子目录）
Disallow: /instance	禁止HaoSouSpider访问/instance目录（包括子目录）
User-agent:BaiduSpider	开始配置：BaiduSpider
Disallow: /Scripts	禁止BaiduSpider访问/Scripts目录（包括子目录）
Disallow: /Search	禁止BaiduSpider访问/Search目录（包括子目录）
Disallow: /search	禁止BaiduSpider访问/search目录（包括子目录）
Disallow: /Instance	禁止BaiduSpider访问/Instance目录（包括子目录）
Disallow: /instance	禁止BaiduSpider访问/instance目录（包括子目录）
User-agent:Googlebot	开始配置：Googlebot
Disallow: /Scripts	禁止Googlebot访问/Scripts目录（包括子目录）
Disallow: /Search	禁止Googlebot访问/Search目录（包括子目录）
Disallow: /search	禁止Googlebot访问/search目录（包括子目录）
Disallow: /Instance	禁止Googlebot访问/Instance目录（包括子目录）
Disallow: /instance	禁止Googlebot访问/instance目录（包括子目录）
User-agent:bingbot	开始配置：bingbot
Disallow: /Scripts	禁止bingbot访问/Scripts目录（包括子目录）
Disallow: /Search	禁止bingbot访问/Search目录（包括子目录）
Disallow: /search	禁止bingbot访问/search目录（包括子目录）
Disallow: /Instance	禁止bingbot访问/Instance目录（包括子目录）
Disallow: /instance	禁止bingbot访问/instance目录（包括子目录）

活动推荐

Robots检测