Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /d*de	禁止所有搜索引擎访问*/dde**目录（包括子目录）
Disallow: /i*ude	禁止所有搜索引擎访问*/iude**目录（包括子目录）
Disallow: /m*er	禁止所有搜索引擎访问*/mer**目录（包括子目录）
Disallow: /p*us	禁止所有搜索引擎访问*/pus**目录（包括子目录）
Disallow: /te*ets	禁止所有搜索引擎访问*/teets**目录（包括子目录）
Disallow: /d*a	禁止所有搜索引擎访问*/da**目录（包括子目录）
Disallow: /i*es	禁止所有搜索引擎访问*/ies**目录（包括子目录）
Disallow: /index.php	禁止所有搜索引擎访问根目录下的index.php文件
Disallow: /404.htm	禁止所有搜索引擎访问根目录下的404.htm文件
Disallow: /win*sda	禁止所有搜索引擎访问*/winsda**目录（包括子目录）
Disallow: /img.php	禁止所有搜索引擎访问根目录下的img.php文件
Disallow: /arctj.php	禁止所有搜索引擎访问根目录下的arctj.php文件
Disallow: /test1.php	禁止所有搜索引擎访问根目录下的test1.php文件
Allow: /p*us/search.php	允许所有搜索引擎访问*/pus目录下的search.php**文件