Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Allow:	禁止所有搜索引擎访问网站的任何部分
Disallow: *vendors?q	禁止所有搜索引擎访问*vendors,参数为q的页面
Disallow: *components-for-blog	禁止所有搜索引擎访问根目录下以components-for-blog结尾的目录（包括子目录）
Disallow: *partners/	禁止所有搜索引擎访问根目录下以partners结尾的目录
Disallow: /prompt-library-category/	禁止所有搜索引擎访问/prompt-library-category目录
Disallow: /tool-categories/	禁止所有搜索引擎访问/tool-categories目录
Disallow: /prompt-library-use-case/	禁止所有搜索引擎访问/prompt-library-use-case目录
Disallow: /glossary-categories/	禁止所有搜索引擎访问/glossary-categories目录
Sitemap: https://www.copy.ai/sitemap.xml	Sitemap地址： https://www.copy.ai/sitemap.xml