Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /api	禁止所有搜索引擎访问/api目录（包括子目录）
Disallow: /common	禁止所有搜索引擎访问/common目录（包括子目录）
Disallow: /database	禁止所有搜索引擎访问/database目录（包括子目录）
Disallow: /editor	禁止所有搜索引擎访问/editor目录（包括子目录）
Disallow: /images	禁止所有搜索引擎访问/images目录（包括子目录）
Disallow: /inc	禁止所有搜索引擎访问/inc目录（包括子目录）
Disallow: /skins	禁止所有搜索引擎访问/skins目录（包括子目录）
Disallow: /5uk09	禁止所有搜索引擎访问/5uk09目录（包括子目录）
Disallow: /users	禁止所有搜索引擎访问/users目录（包括子目录）
Disallow: /adfile	禁止所有搜索引擎访问/adfile目录（包括子目录）
Disallow: /agfile	禁止所有搜索引擎访问/agfile目录（包括子目录）
Disallow: /js	禁止所有搜索引擎访问/js目录（包括子目录）
Disallow: /agfile/dd3.htm	禁止所有搜索引擎访问/agfile目录下的dd3.htm文件
Disallow: /agfile/dd4.htm	禁止所有搜索引擎访问/agfile目录下的dd4.htm文件
Disallow: /agfile/ad6.htm	禁止所有搜索引擎访问/agfile目录下的ad6.htm文件
Disallow: /agfile/pairs.js	禁止所有搜索引擎访问/agfile目录下的pairs.js文件
Disallow: /agfile/pside.htm	禁止所有搜索引擎访问/agfile目录下的pside.htm文件
Disallow: /agfile/top.js	禁止所有搜索引擎访问/agfile目录下的top.js文件
Disallow: /soft/er.html	禁止所有搜索引擎访问/soft目录下的er.html文件
Disallow: /soft/er.asp	禁止所有搜索引擎访问/soft目录下的er.asp文件
Disallow: /soft/download.asp	禁止所有搜索引擎访问/soft目录下的download.asp文件
Disallow: /txt	禁止所有搜索引擎访问/txt目录（包括子目录）
Disallow: /txt2	禁止所有搜索引擎访问/txt2目录（包括子目录）
Disallow: /soft/download.asp?softid=*	禁止所有搜索引擎访问download.asp,参数为softid=*的页面

活动推荐

Robots检测