Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /index.php	禁止所有搜索引擎访问根目录下的*index.php*文件
Disallow: /?from	禁止所有搜索引擎访问所有带参数为from*的页面
Disallow: /page	禁止所有搜索引擎访问/page目录（包括子目录）
Disallow: /base	禁止所有搜索引擎访问/base目录（包括子目录）
Disallow: /404	禁止所有搜索引擎访问/404目录（包括子目录）
Disallow: /advs	禁止所有搜索引擎访问/advs目录（包括子目录）
Disallow: /diy	禁止所有搜索引擎访问/diy目录（包括子目录）
Disallow: /effect	禁止所有搜索引擎访问/effect目录（包括子目录）
Disallow: /kedit	禁止所有搜索引擎访问/kedit目录（包括子目录）
Disallow: /member	禁止所有搜索引擎访问/member目录（包括子目录）
Disallow: /menu	禁止所有搜索引擎访问/menu目录（包括子目录）
Disallow: /tools	禁止所有搜索引擎访问/tools目录（包括子目录）
Disallow: /*.csv$	禁止所有搜索引擎访问所有以*.csv结尾的文件
Disallow: /*.doc$	禁止所有搜索引擎访问所有以*.doc结尾的文件
Disallow: /*.docx$	禁止所有搜索引擎访问所有以*.docx结尾的文件
Disallow: /*.xls$	禁止所有搜索引擎访问所有以*.xls结尾的文件
Disallow: /*.xlsx$	禁止所有搜索引擎访问所有以*.xlsx结尾的文件
Disallow: /*.ppt$	禁止所有搜索引擎访问所有以*.ppt结尾的文件
Disallow: /*.pptx$	禁止所有搜索引擎访问所有以*.pptx结尾的文件
Disallow: /*.shtml$	禁止所有搜索引擎访问所有以*.shtml结尾的文件
Disallow: /_	禁止所有搜索引擎访问所有包含_的文件
Disallow: /=	禁止所有搜索引擎访问所有包含=的文件
Disallow: /-	禁止所有搜索引擎访问所有包含-的文件

活动推荐

Robots检测