Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /?*	禁止所有搜索引擎访问任何带参数的页面
Disallow: /search.asp	禁止所有搜索引擎访问根目录下的search.asp文件
Disallow: /search?kw=*	禁止所有搜索引擎访问search,参数为kw=*的页面
Disallow: /showbigpic.html*	禁止所有搜索引擎访问根目录下的showbigpic.html*文件
Disallow: /getdownpage.asp*	禁止所有搜索引擎访问根目录下的getdownpage.asp*文件
Disallow: /down_404.html	禁止所有搜索引擎访问根目录下的down_404.html文件
Disallow: /plsc/	禁止所有搜索引擎访问/plsc目录
Disallow: /rss/	禁止所有搜索引擎访问/rss目录
Disallow: /llk/	禁止所有搜索引擎访问/llk目录
Disallow: /pal5/	禁止所有搜索引擎访问/pal5目录
Disallow: /pcgame/all/0-0-0-0-new-pic-1	禁止所有搜索引擎访问/pcgame/all/0-0-0-0-new-pic-1目录（包括子目录）
Disallow: /mini/all/0-0-0-0-new-pic-1	禁止所有搜索引擎访问/mini/all/0-0-0-0-new-pic-1目录（包括子目录）
Disallow: /pcgame//----hot--*	禁止所有搜索引擎访问/pcgame/目录下包含----hot--*的文件
Disallow: /pcgame//-----list-*	禁止所有搜索引擎访问/pcgame/目录下包含-----list-*的文件
Disallow: /pcgame/all/0-0-0-0-new-pic-1.html	禁止所有搜索引擎访问/pcgame/all目录下的0-0-0-0-new-pic-1.html文件
Disallow: /mini/all/0-0-0-0-new-pic-1.html	禁止所有搜索引擎访问/mini/all目录下的0-0-0-0-new-pic-1.html文件
Disallow: /pcgame//----hot--*.html	禁止所有搜索引擎访问/pcgame/目录下的----hot--*.html文件
Disallow: /pcgame//-----list-*.html	禁止所有搜索引擎访问/pcgame/目录下的-----list-*.html文件

活动推荐

Robots检测