Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /search/*	禁止所有搜索引擎访问/search下的所有文件
Disallow: /ajax	禁止所有搜索引擎访问/ajax目录（包括子目录）
Disallow: /ajaxnew	禁止所有搜索引擎访问/ajaxnew目录（包括子目录）
Disallow: /do	禁止所有搜索引擎访问/do目录（包括子目录）
Disallow: /email	禁止所有搜索引擎访问/email目录（包括子目录）
Disallow: /Tool	禁止所有搜索引擎访问/Tool目录（包括子目录）
Disallow: /Uploads	禁止所有搜索引擎访问/Uploads目录（包括子目录）
Disallow: /360guide/*	禁止所有搜索引擎访问/360guide下的所有文件
Disallow: /destguides/	禁止所有搜索引擎访问/destguides目录
Disallow: /community/	禁止所有搜索引擎访问/community目录
Disallow: /shangwu/*	禁止所有搜索引擎访问/shangwu下的所有文件
Disallow: /Alliance	禁止所有搜索引擎访问所有包含Alliance的文件
Disallow: /alliance	禁止所有搜索引擎访问所有包含alliance的文件
Disallow: /Ouid	禁止所有搜索引擎访问所有包含Ouid的文件
Disallow: /ouid	禁止所有搜索引擎访问所有包含ouid的文件
Disallow: /utm_	禁止所有搜索引擎访问所有包含utm_的文件
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /sitemap-*	禁止所有搜索引擎访问根目录下以sitemap-开头的目录（包括子目录）
Disallow: /tourism-*	禁止所有搜索引擎访问根目录下以tourism-开头的目录（包括子目录）
Disallow: /attraction_*	禁止所有搜索引擎访问根目录下以attraction_开头的目录（包括子目录）
Disallow:/destinationsite/Shared/	禁止所有搜索引擎访问/destinationsite/Shared目录
Disallow:/destinationsite/TTDSecond/	禁止所有搜索引擎访问/destinationsite/TTDSecond目录
Disallow:/destinationsite/SharedComm/	禁止所有搜索引擎访问/destinationsite/SharedComm目录
Disallow:/asksite/Ajax/	禁止所有搜索引擎访问/asksite/Ajax目录
Sitemap:http://you.ctrip.com/sitemap/sitemap.xml	Sitemap地址：http://you.ctrip.com/sitemap/sitemap.xml

活动推荐

Robots检测