Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-Agent: *	开始配置：所有搜索引擎
Disallow: /cgi-bin	禁止所有搜索引擎访问/cgi-bin目录（包括子目录）
Disallow: /wp-	禁止所有搜索引擎访问/wp-目录（包括子目录）
Disallow: /?s=	禁止所有搜索引擎访问,参数为s=的页面
Disallow: *&s=	禁止所有搜索引擎访问根目录下以&s=结尾的目录（包括子目录）
Disallow: /search	禁止所有搜索引擎访问/search目录（包括子目录）
Disallow: /author/	禁止所有搜索引擎访问/author目录
Disallow: *?attachment_id=	禁止所有搜索引擎访问所有带参数为attachment_id=的页面
Disallow: */feed	禁止所有搜索引擎访问*/feed目录（包括子目录）
Disallow: */rss	禁止所有搜索引擎访问*/rss目录（包括子目录）
Disallow: */embed	禁止所有搜索引擎访问*/embed目录（包括子目录）
Allow: /wp-content/uploads/	允许所有搜索引擎访问/wp-content/uploads目录
Allow: /wp-content/themes/	允许所有搜索引擎访问/wp-content/themes目录
Allow: //.js	允许所有搜索引擎访问/目录下所有以.js*为后缀的文件
Allow: //.css	允许所有搜索引擎访问/目录下所有以.css*为后缀的文件
Allow: /wp-*.png	允许所有搜索引擎访问根目录下的*wp-.png**文件
Allow: /wp-*.jpg	允许所有搜索引擎访问根目录下的*wp-.jpg**文件
Allow: /wp-*.jpeg	允许所有搜索引擎访问根目录下的*wp-.jpeg**文件
Allow: /wp-*.gif	允许所有搜索引擎访问根目录下的*wp-.gif**文件
Allow: /wp-*.svg	允许所有搜索引擎访问根目录下的*wp-.svg**文件
Allow: /wp-*.pdf	允许所有搜索引擎访问根目录下的*wp-.pdf**文件
Sitemap: https://www.idc1680.com/sitemap.xml	Sitemap地址： https://www.idc1680.com/sitemap.xml
Disallow: /wp-content/uploads/wpo-plugins-tables-list.json	禁止所有搜索引擎访问/wp-content/uploads目录下的wpo-plugins-tables-list.json文件

活动推荐

Robots检测