Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /_next/	禁止所有搜索引擎访问/_next目录
Disallow: /home/	禁止所有搜索引擎访问/home目录
Disallow: /api/	禁止所有搜索引擎访问/api目录
Disallow: /*passwd$	禁止所有搜索引擎访问所有以*passwd结尾的文件
Disallow: /*_blank$	禁止所有搜索引擎访问所有以*_blank结尾的文件
Disallow: /*undefined$	禁止所有搜索引擎访问所有以*undefined结尾的文件
Disallow: /fs/download/	禁止所有搜索引擎访问/fs/download目录
Disallow: /apps/cps/*/product/to-insure	禁止所有搜索引擎访问*/apps/cps//product/to-insure**目录（包括子目录）
Disallow: /apps/cps/*/product/insure	禁止所有搜索引擎访问*/apps/cps//product/insure**目录（包括子目录）
Disallow: /apps/cps/*/product/task	禁止所有搜索引擎访问*/apps/cps//product/task**目录（包括子目录）
Disallow: /apps/cps/*/authentication	禁止所有搜索引擎访问*/apps/cps//authentication**目录（包括子目录）
Disallow: /apps/cps/*/underwrite	禁止所有搜索引擎访问*/apps/cps//underwrite**目录（包括子目录）
Disallow: /apps/underwrite	禁止所有搜索引擎访问/apps/underwrite目录（包括子目录）