Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /?spm=	禁止所有搜索引擎访问所有带参数为spm=*的页面
Disallow: /?tracelog=	禁止所有搜索引擎访问所有带参数为tracelog=*的页面
Disallow: /?page=	禁止所有搜索引擎访问所有带参数为page=*的页面
Disallow: /template	禁止所有搜索引擎访问/template目录（包括子目录）
Disallow: /admin	禁止所有搜索引擎访问/admin目录（包括子目录）
Disallow: /config	禁止所有搜索引擎访问/config目录（包括子目录）
Disallow: /classes	禁止所有搜索引擎访问/classes目录（包括子目录）
Disallow: /log	禁止所有搜索引擎访问/log目录（包括子目录）
Disallow: /language	禁止所有搜索引擎访问/language目录（包括子目录）
Disallow: /script	禁止所有搜索引擎访问/script目录（包括子目录）
Disallow: /static	禁止所有搜索引擎访问/static目录（包括子目录）
Disallow: /alilog	禁止所有搜索引擎访问/alilog目录（包括子目录）
Disallow: /zixun/articles/	禁止所有搜索引擎访问/zixun/articles目录
Disallow: /zixun/jiaocheng/	禁止所有搜索引擎访问/zixun/jiaocheng目录
Disallow: /zixun/wenjim/	禁止所有搜索引擎访问/zixun/wenjim目录
Disallow: /ss/*	禁止所有搜索引擎访问/ss下的所有文件
Disallow: /search?*	禁止所有搜索引擎访问search带任何参数的页面
User-agent: Googlebot	开始配置：Googlebot
Disallow:	允许Googlebot访问网站的任何部分
User-agent: AdsBot-Google	开始配置：AdsBot-Google
Disallow:	允许AdsBot-Google访问网站的任何部分
User-agent: Googlebot-Image	开始配置：Googlebot-Image
Disallow:	允许Googlebot-Image访问网站的任何部分

活动推荐

Robots检测