Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /&	禁止所有搜索引擎访问所有包含&的文件
Disallow: /download/	禁止所有搜索引擎访问/download目录
Disallow: /active/	禁止所有搜索引擎访问/active目录
Disallow: /search/	禁止所有搜索引擎访问/search目录
Disallow: /searchword/	禁止所有搜索引擎访问/searchword目录
Disallow: /shipin/search-*	禁止所有搜索引擎访问/shipin目录下以search-开头的目录（包括子目录）
Disallow: /shipin/download/*	禁止所有搜索引擎访问/shipin/download下的所有文件
Disallow: /tupian/search/	禁止所有搜索引擎访问/tupian/search目录
Disallow: /404.html	禁止所有搜索引擎访问根目录下的404.html文件
Disallow: /bargain/	禁止所有搜索引擎访问/bargain目录
Disallow: /unlawful.html	禁止所有搜索引擎访问根目录下的unlawful.html文件
Disallow: /so-sound/*.html	禁止所有搜索引擎访问/so-sound目录下所有以.html为后缀的文件
Disallow: /s-*	禁止所有搜索引擎访问根目录下以s-开头的目录（包括子目录）
Disallow: //-*.html	禁止所有搜索引擎访问/目录下的-*.html文件
Disallow: //-/	禁止所有搜索引擎访问//-*下的所有文件
Disallow: //p_	禁止所有搜索引擎访问/*目录下以p_开头的目录（包括子目录）
Disallow: /*Array	禁止所有搜索引擎访问根目录下以Array结尾的目录（包括子目录）
Allow: //p_/	允许所有搜索引擎访问/*目录下以p_开头的目录
Disallow: /php	禁止所有搜索引擎访问所有包含php的文件
Disallow: /admin*	禁止所有搜索引擎访问根目录下以admin开头的目录（包括子目录）
Disallow: /!	禁止所有搜索引擎访问所有包含!的文件
Disallow: /*ashx	禁止所有搜索引擎访问根目录下以ashx结尾的目录（包括子目录）
Disallow: /filter	禁止所有搜索引擎访问所有包含filter的文件
Disallow: /so-sheyingtu/*	禁止所有搜索引擎访问/so-sheyingtu下的所有文件
Disallow: /vcg	禁止所有搜索引擎访问所有包含vcg的文件
Disallow: /so-edit*	禁止所有搜索引擎访问根目录下以so-edit开头的目录（包括子目录）
Disallow: /editor/*	禁止所有搜索引擎访问/editor下的所有文件
Disallow: /proxy*	禁止所有搜索引擎访问根目录下以proxy开头的目录（包括子目录）
Sitemap: https://www.51miz.com/sitemap.xml	Sitemap地址： https://www.51miz.com/sitemap.xml

活动推荐

Robots检测