Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-Agent: *	开始配置：所有搜索引擎
Disallow: /api/	禁止所有搜索引擎访问/api目录
Disallow: /app/	禁止所有搜索引擎访问/app目录
Disallow: /ask/	禁止所有搜索引擎访问/ask目录
Disallow: /caches/	禁止所有搜索引擎访问/caches目录
Disallow: /html/fuwu/	禁止所有搜索引擎访问/html/fuwu目录
Disallow: /about/	禁止所有搜索引擎访问/about目录
Disallow: /product/	禁止所有搜索引擎访问/product目录
Disallow: /phpcms/	禁止所有搜索引擎访问/phpcms目录
Disallow: /phpsso_server/	禁止所有搜索引擎访问/phpsso_server目录
Disallow: /api.php?*	禁止所有搜索引擎访问api.php带任何参数的页面
Disallow: /pugin.php?*	禁止所有搜索引擎访问pugin.php带任何参数的页面
Disallow: /index.php?*	禁止所有搜索引擎访问index.php带任何参数的页面
Disallow: /?*	禁止所有搜索引擎访问任何带参数的页面
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /admin.php	禁止所有搜索引擎访问根目录下的admin.php文件
Disallow: /static/	禁止所有搜索引擎访问/static目录
Disallow: /statics/	禁止所有搜索引擎访问/statics目录
Sitemap: https://www.hdtimes.cn/sitemaps.xml	Sitemap地址： https://www.hdtimes.cn/sitemaps.xml