Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /admin/	禁止所有搜索引擎访问/admin目录
Disallow: /cert/	禁止所有搜索引擎访问/cert目录
Disallow: /data/	禁止所有搜索引擎访问/data目录
Disallow: /includes/	禁止所有搜索引擎访问/includes目录
Disallow: /install/	禁止所有搜索引擎访问/install目录
Disallow: /languages/	禁止所有搜索引擎访问/languages目录
Disallow: /plugins/	禁止所有搜索引擎访问/plugins目录
Disallow: /templates/	禁止所有搜索引擎访问/templates目录
Disallow: /themes/	禁止所有搜索引擎访问/themes目录
Disallow: /upgrade/	禁止所有搜索引擎访问/upgrade目录
Disallow: /api/	禁止所有搜索引擎访问/api目录
Disallow: /js/	禁止所有搜索引擎访问/js目录
Disallow: /affiche.php	禁止所有搜索引擎访问根目录下的affiche.php文件
Disallow: /captcha.php	禁止所有搜索引擎访问根目录下的captcha.php文件
Disallow: /comment.php	禁止所有搜索引擎访问根目录下的comment.php文件
Disallow: /cycle_image.php	禁止所有搜索引擎访问根目录下的cycle_image.php文件
Disallow: /goods_script.php	禁止所有搜索引擎访问根目录下的goods_script.php文件
Disallow: /receive.php	禁止所有搜索引擎访问根目录下的receive.php文件
Disallow: /region.php	禁止所有搜索引擎访问根目录下的region.php文件
Disallow: /respond.php	禁止所有搜索引擎访问根目录下的respond.php文件
Disallow: /feed.php	禁止所有搜索引擎访问根目录下的feed.php文件
Disallow: /gallery.php	禁止所有搜索引擎访问根目录下的gallery.php文件
Disallow: /register.php	禁止所有搜索引擎访问根目录下的register.php文件
Disallow: /user.php	禁止所有搜索引擎访问根目录下的user.php文件
Disallow: /flow.php	禁止所有搜索引擎访问根目录下的flow.php文件
Disallow: /?	禁止所有搜索引擎访问任何带参数的页面
Disallow: /?*	禁止所有搜索引擎访问任何带参数的页面
Disallow: /about	禁止所有搜索引擎访问/about目录（包括子目录）
Disallow: /tag	禁止所有搜索引擎访问/tag目录（包括子目录）
Disallow: /pay.html	禁止所有搜索引擎访问根目录下的pay.html文件
Disallow: /404.html	禁止所有搜索引擎访问根目录下的404.html文件
Disallow: /news/tag/*/	禁止所有搜索引擎访问/news/tag目录下以结尾的目录
Disallow: /agreement.php	禁止所有搜索引擎访问根目录下的agreement.php文件
Disallow: /seo/	禁止所有搜索引擎访问/seo目录
User-agent:MJ12bot	开始配置：MJ12bot
Disallow:/	禁止MJ12bot访问网站的任何部分

活动推荐

Robots检测