Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /*?ivk_sa=	禁止所有搜索引擎访问所有带参数为ivk_sa=的页面
Disallow: /*?utm_source=	禁止所有搜索引擎访问所有带参数为utm_source=的页面
Disallow: /*⁣?continueFlag=	禁止所有搜索引擎访问⁣,参数为continueFlag=*的页面
Disallow: /*⁣?from=	禁止所有搜索引擎访问⁣,参数为from=*的页面
Disallow: /*?bd_vid=	禁止所有搜索引擎访问所有带参数为bd_vid=的页面
Disallow: /*?ref=	禁止所有搜索引擎访问所有带参数为ref=的页面
Disallow: http://www.gsensebot.com/	禁止所有搜索引擎访问http目录（包括子目录）
Disallow: https://www.gsensebot.com/	禁止所有搜索引擎访问https目录（包括子目录）
Disallow: /*?hl=	禁止所有搜索引擎访问所有带参数为hl=的页面
Disallow: /*?ggd_previous_page_time_stamp=	禁止所有搜索引擎访问所有带参数为ggd_previous_page_time_stamp=的页面
Sitemap: https://blog.geetest.com/en/sitemap.xml	Sitemap地址： https://blog.geetest.com/en/sitemap.xml
Sitemap: https://blog.geetest.com/en/sitemap1.xml	Sitemap地址： https://blog.geetest.com/en/sitemap1.xml