Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: bingbot	开始配置：bingbot
Disallow: /	禁止bingbot访问网站的任何部分
User-agent: MSNbot	开始配置：MSNbot
Disallow: /	禁止MSNbot访问网站的任何部分
User-agent: AdIdxBot	开始配置：AdIdxBot
Disallow: /	禁止AdIdxBot访问网站的任何部分
User-agent: *	开始配置：所有搜索引擎
Disallow: /d/	禁止所有搜索引擎访问/d目录
Disallow: /e/space/	禁止所有搜索引擎访问/e/space目录
Disallow: /e/class/	禁止所有搜索引擎访问/e/class目录
Disallow: /e/config/	禁止所有搜索引擎访问/e/config目录
Disallow: /e/data/	禁止所有搜索引擎访问/e/data目录
Disallow: /e/enews/	禁止所有搜索引擎访问/e/enews目录
Disallow: /e/update/	禁止所有搜索引擎访问/e/update目录
Disallow: /e/member/	禁止所有搜索引擎访问/e/member目录
Disallow: /e/ftp/	禁止所有搜索引擎访问/e/ftp目录
Disallow: /e/template/	禁止所有搜索引擎访问/e/template目录
Disallow: /e/space/	禁止所有搜索引擎访问/e/space目录
Disallow: /e/admin/	禁止所有搜索引擎访问/e/admin目录
Disallow: /e/public/	禁止所有搜索引擎访问/e/public目录
Disallow: /testing/	禁止所有搜索引擎访问/testing目录
Disallow: /xrx/	禁止所有搜索引擎访问/xrx目录
Disallow: /yun/	禁止所有搜索引擎访问/yun目录
Disallow: /zhihu/*.html	禁止所有搜索引擎访问/zhihu目录下所有以.html为后缀的文件
Disallow: /yxmanual/*.html	禁止所有搜索引擎访问/yxmanual目录下所有以.html为后缀的文件
Disallow: /teacher/yx_index.html	禁止所有搜索引擎访问/teacher目录下的yx_index.html文件
Disallow: /student/job/yx_index.shtml	禁止所有搜索引擎访问/student/job目录下的yx_index.shtml文件
Disallow: /student/yx_works.html	禁止所有搜索引擎访问/student目录下的yx_works.html文件
Disallow: /about/job-desc.html	禁止所有搜索引擎访问/about目录下的job-desc.html文件
Disallow: /404.shtml	禁止所有搜索引擎访问根目录下的404.shtml文件
Disallow: /student/job/	禁止所有搜索引擎访问/student/job目录
Disallow: /page/it/teachers.html	禁止所有搜索引擎访问/page/it目录下的teachers.html文件

活动推荐

Robots检测