Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /users	禁止所有搜索引擎访问/users目录（包括子目录）
Disallow: /xiaozhi	禁止所有搜索引擎访问/xiaozhi目录（包括子目录）
Disallow: /asynces	禁止所有搜索引擎访问/asynces目录（包括子目录）
Disallow: /goods	禁止所有搜索引擎访问/goods目录（包括子目录）
Disallow: /p/q/	禁止所有搜索引擎访问/p/q目录
Disallow: /search/	禁止所有搜索引擎访问/search目录
Disallow: /my?project_id=*	禁止所有搜索引擎访问my,参数为project_id=*的页面
Disallow: /login?ok_url=*	禁止所有搜索引擎访问login,参数为ok_url=*的页面
Disallow: /loginWithPwd?ok_url=*	禁止所有搜索引擎访问loginWithPwd,参数为ok_url=*的页面
Disallow: /ndapi/	禁止所有搜索引擎访问/ndapi目录
Disallow: /coupons/	禁止所有搜索引擎访问/coupons目录
Disallow: /projectDetails/	禁止所有搜索引擎访问/projectDetails目录
Disallow: /api/	禁止所有搜索引擎访问/api目录
Disallow: /detail/	禁止所有搜索引擎访问/detail目录