Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: Mediapartners-Google	开始配置：Mediapartners-Google
Disallow:	允许Mediapartners-Google访问网站的任何部分
User-agent: *	开始配置：所有搜索引擎
Disallow: /publish	禁止所有搜索引擎访问/publish目录（包括子目录）
Disallow: /down.php	禁止所有搜索引擎访问根目录下的down.php文件
Disallow: /popsend.php	禁止所有搜索引擎访问根目录下的popsend.php文件
Disallow: /article_topic/topic/2204683.html	禁止所有搜索引擎访问/article_topic/topic目录下的2204683.html文件
Disallow: /index.html	禁止所有搜索引擎访问根目录下的index.html文件
Disallow: /index.shtml	禁止所有搜索引擎访问根目录下的index.shtml文件
Disallow: /index.html	禁止所有搜索引擎访问根目录下的index.html文件
Disallow: /index.shtml	禁止所有搜索引擎访问根目录下的index.shtml文件
Disallow: /topic/3263546.html	禁止所有搜索引擎访问/topic目录下的3263546.html文件
Disallow: /xiazaiDown.php	禁止所有搜索引擎访问根目录下的xiazaiDown.php文件
Disallow: /link	禁止所有搜索引擎访问/link目录（包括子目录）
Disallow: /index.php?c=Detail_DetailMini*	禁止所有搜索引擎访问index.php,参数为c=Detail_DetailMini*的页面
Disallow: /*?from=	禁止所有搜索引擎访问所有带参数为from=的页面