Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: AhrefsBot	开始配置：AhrefsBot
Disallow: /	禁止AhrefsBot访问网站的任何部分
User-agent: *	开始配置：所有搜索引擎
Disallow: /api/	禁止所有搜索引擎访问/api目录
Disallow: /data/	禁止所有搜索引擎访问/data目录
Disallow: /source/	禁止所有搜索引擎访问/source目录
Disallow: /install/	禁止所有搜索引擎访问/install目录
Disallow: /template/default/	禁止所有搜索引擎访问/template/default目录
Disallow: /config/	禁止所有搜索引擎访问/config目录
Disallow: /uc_client/	禁止所有搜索引擎访问/uc_client目录
Disallow: /uc_server/	禁止所有搜索引擎访问/uc_server目录
Disallow: /admin.php	禁止所有搜索引擎访问根目录下的admin.php文件
Disallow: /search.php	禁止所有搜索引擎访问根目录下的search.php文件
Disallow: /member.php	禁止所有搜索引擎访问根目录下的member.php文件
Disallow: /member.php?mod=logging*	禁止所有搜索引擎访问member.php,参数为mod=logging*的页面
Disallow: /api.php	禁止所有搜索引擎访问根目录下的api.php文件
Disallow: /misc.php	禁止所有搜索引擎访问根目录下的misc.php文件
Disallow: /connect.php	禁止所有搜索引擎访问根目录下的connect.php文件
Disallow: /forum.php?mod=redirect*	禁止所有搜索引擎访问forum.php,参数为mod=redirect*的页面
Disallow: /forum.php?mod=post*	禁止所有搜索引擎访问forum.php,参数为mod=post*的页面
Disallow: /forum.php?mod=misc*	禁止所有搜索引擎访问forum.php,参数为mod=misc*的页面
Disallow: /home.php?*	禁止所有搜索引擎访问home.php带任何参数的页面
Disallow: /?mod=misc	禁止所有搜索引擎访问所有带参数为mod=misc*的页面
Disallow: /?mod=attachment	禁止所有搜索引擎访问所有带参数为mod=attachment*的页面
Disallow: /mobile=yes	禁止所有搜索引擎访问所有包含mobile=yes的文件
Disallow: /space-*	禁止所有搜索引擎访问根目录下以space-开头的目录（包括子目录）
Disallow: /forum.php?fid=*	禁止所有搜索引擎访问forum.php,参数为fid=*的页面
Disallow: /forum.php?aid=*	禁止所有搜索引擎访问forum.php,参数为aid=*的页面
Disallow: /forum.php?goto=*	禁止所有搜索引擎访问forum.php,参数为goto=*的页面
Disallow: /forum.php?tid=*	禁止所有搜索引擎访问forum.php,参数为tid=*的页面
Disallow: /forum.php?op=*	禁止所有搜索引擎访问forum.php,参数为op=*的页面
Disallow: /forum.php?do=*	禁止所有搜索引擎访问forum.php,参数为do=*的页面
Disallow: /*?peed=noscript	禁止所有搜索引擎访问所有带参数为peed=noscript的页面
Disallow: /*?ModPagespeed=noscript	禁止所有搜索引擎访问所有带参数为ModPagespeed=noscript的页面
Disallow: /?*	禁止所有搜索引擎访问任何带参数的页面
Disallow: /index.php?*	禁止所有搜索引擎访问index.php带任何参数的页面
Disallow: /?_t_t_t=	禁止所有搜索引擎访问所有带参数为_t_t_t=*的页面

活动推荐

Robots检测