Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-Agent: *	开始配置：所有搜索引擎
Disallow: //News/.html	禁止所有搜索引擎访问*//News目录下所有以.html**为后缀的文件
Disallow: /TNews/	禁止所有搜索引擎访问/TNews目录
Disallow: /zhuanzai/	禁止所有搜索引擎访问/zhuanzai目录
Disallow: /*/news.html	禁止所有搜索引擎访问/目录下的news.html*文件
Disallow: /Normal/News/	禁止所有搜索引擎访问/Normal/News目录
Disallow: /*/bochushijian.html	禁止所有搜索引擎访问/目录下的bochushijian.html*文件
Disallow: /Event.aspx/NewEvent?clubID=*	禁止所有搜索引擎访问NewEvent,参数为clubID=*的页面
Disallow: /User/Login.aspx?ReturnUrl=*	禁止所有搜索引擎访问Login.aspx,参数为ReturnUrl=*的页面
Disallow: /zz.ashx?mainid=*	禁止所有搜索引擎访问zz.ashx,参数为mainid=*的页面
Disallow: /Member.aspx	禁止所有搜索引擎访问根目录下的Member.aspx文件
Disallow: /movie/	禁止所有搜索引擎访问/movie目录
Disallow: /Services/	禁止所有搜索引擎访问/Services目录
Disallow: /guide/	禁止所有搜索引擎访问/guide目录
Disallow: /c/*/Forum.aspx/Control_ListForumSection?sectionID=	禁止所有搜索引擎访问Control_ListForumSection,参数为sectionID=的页面
Disallow: /c/*/Vote.aspx/Control_ListOptionVoters?optionID=	禁止所有搜索引擎访问Control_ListOptionVoters,参数为optionID=的页面