Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Crawl-delay: 60	允许所有搜索引擎访问60目录（包括子目录）
Disallow: /Application/	禁止所有搜索引擎访问/Application目录
Disallow: /data/	禁止所有搜索引擎访问/data目录
Disallow: /ThinkPHP/	禁止所有搜索引擎访问/ThinkPHP目录
Disallow: /wechat/	禁止所有搜索引擎访问/wechat目录
Disallow: /plus/	禁止所有搜索引擎访问/plus目录
Disallow:/*.php?$	禁止所有搜索引擎访问所有以*.php?结尾的文件
Sitemap: https://www.tex68.com/sitemap.xml	Sitemap地址： https://www.tex68.com/sitemap.xml
Sitemap: https://www.tex68.com/article.xml	Sitemap地址： https://www.tex68.com/article.xml
Sitemap: https://www.tex68.com/member.xml	Sitemap地址： https://www.tex68.com/member.xml