Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /opencms/	禁止所有搜索引擎访问/opencms目录
Disallow: /admin/	禁止所有搜索引擎访问/admin目录
Disallow: /post/	禁止所有搜索引擎访问/post目录
Disallow: /wp-content/	禁止所有搜索引擎访问/wp-content目录
Disallow: /wp-admin/	禁止所有搜索引擎访问/wp-admin目录
Disallow: /topic/	禁止所有搜索引擎访问/topic目录
Disallow: /account/	禁止所有搜索引擎访问/account目录
Disallow: /sou/	禁止所有搜索引擎访问/sou目录
Disallow: /search/	禁止所有搜索引擎访问/search目录
Disallow: /souall/	禁止所有搜索引擎访问/souall目录
Disallow: /plum/	禁止所有搜索引擎访问/plum目录
Disallow: /?ref=appplus	禁止所有搜索引擎访问所有带参数为ref=appplus*的页面
Disallow: /?from=spi-desc	禁止所有搜索引擎访问所有带参数为from=spi-desc*的页面
Disallow: /tag_list	禁止所有搜索引擎访问/tag_list目录（包括子目录）
Disallow: /tag/	禁止所有搜索引擎访问/tag目录
Disallow: /market/	禁止所有搜索引擎访问/market目录
Disallow: /market-web/	禁止所有搜索引擎访问/market-web目录
Disallow: /mini/	禁止所有搜索引擎访问/mini目录
Disallow: /berry/	禁止所有搜索引擎访问/berry目录
Disallow: /McDonald/	禁止所有搜索引擎访问/McDonald目录
Disallow: /usersdk/	禁止所有搜索引擎访问/usersdk目录
Disallow: /yyhshare/	禁止所有搜索引擎访问/yyhshare目录
Disallow: /yyhfaq/	禁止所有搜索引擎访问/yyhfaq目录
Disallow: /strategylist/	禁止所有搜索引擎访问/strategylist目录
Disallow: /strategy/	禁止所有搜索引擎访问/strategy目录
Disallow: /m/	禁止所有搜索引擎访问/m目录
Disallow: /mobile/	禁止所有搜索引擎访问/mobile目录

活动推荐

Robots检测