Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /api/	禁止所有搜索引擎访问/api目录
Disallow: /cache/	禁止所有搜索引擎访问/cache目录
Disallow: /caches/	禁止所有搜索引擎访问/caches目录
Disallow: /data/	禁止所有搜索引擎访问/data目录
Disallow: /include/	禁止所有搜索引擎访问/include目录
Disallow: /install/	禁止所有搜索引擎访问/install目录
Disallow: /member/	禁止所有搜索引擎访问/member目录
Disallow: /phpsso_server/	禁止所有搜索引擎访问/phpsso_server目录
Disallow: /statics/	禁止所有搜索引擎访问/statics目录
Disallow: /uploadfile/	禁止所有搜索引擎访问/uploadfile目录
Disallow: /wap/	禁止所有搜索引擎访问/wap目录
Disallow: /wapapi/	禁止所有搜索引擎访问/wapapi目录
Disallow: /wapcaches/	禁止所有搜索引擎访问/wapcaches目录
Disallow: /wapmember/	禁止所有搜索引擎访问/wapmember目录
Disallow: /wapuploadfile/	禁止所有搜索引擎访问/wapuploadfile目录
Disallow: /tag/	禁止所有搜索引擎访问/tag目录
Disallow: /*.js$	禁止所有搜索引擎访问所有以*.js结尾的文件
Disallow: /*.css$	禁止所有搜索引擎访问所有以*.css结尾的文件
Disallow: /*.ico$	禁止所有搜索引擎访问所有以*.ico结尾的文件
Disallow: /*.gif$	禁止所有搜索引擎访问所有以*.gif结尾的文件
Disallow: /*.jpg$	禁止所有搜索引擎访问所有以*.jpg结尾的文件
Disallow: /*.jpeg$	禁止所有搜索引擎访问所有以*.jpeg结尾的文件
Disallow: /*.png$	禁止所有搜索引擎访问所有以*.png结尾的文件
Disallow: /*.swf$	禁止所有搜索引擎访问所有以*.swf结尾的文件
Disallow: /*.txt$	禁止所有搜索引擎访问所有以*.txt结尾的文件
Disallow: /*.xml$	禁止所有搜索引擎访问所有以*.xml结尾的文件
Disallow: /*.json$	禁止所有搜索引擎访问所有以*.json结尾的文件
Disallow: /*.bak$	禁止所有搜索引擎访问所有以*.bak结尾的文件
Disallow: /*.sql$	禁止所有搜索引擎访问所有以*.sql结尾的文件
Disallow: /*.tgz$	禁止所有搜索引擎访问所有以*.tgz结尾的文件
Disallow: /*.gz$	禁止所有搜索引擎访问所有以*.gz结尾的文件
Disallow: /*.rar$	禁止所有搜索引擎访问所有以*.rar结尾的文件
Disallow: /*.zip$	禁止所有搜索引擎访问所有以*.zip结尾的文件
Disallow: /*.mp3$	禁止所有搜索引擎访问所有以*.mp3结尾的文件
Disallow: /*.mp4$	禁止所有搜索引擎访问所有以*.mp4结尾的文件

活动推荐

Robots检测