Robots检测工具

Robots检测

异地排名页面相似度网站PK Robots检测 Robots生成死链检测 HTTPS检测 Meta标签生成网站日志分析

文件状态良好，请查看下面具体的报告。

规则	解释	有效
User-agent: *	开始配置：所有搜索引擎
Disallow: /user/	禁止所有搜索引擎访问/user目录
Disallow: /admin/	禁止所有搜索引擎访问/admin目录
Disallow: /upload/	禁止所有搜索引擎访问/upload目录
Disallow: /empty.html	禁止所有搜索引擎访问根目录下的empty.html文件
Disallow: /article/*.html	禁止所有搜索引擎访问/article目录下所有以.html为后缀的文件
Disallow: /bbsapi/open/*	禁止所有搜索引擎访问/bbsapi/open下的所有文件
Disallow: /redirect	禁止所有搜索引擎访问/redirect目录（包括子目录）
Disallow: /redirect/sso/*	禁止所有搜索引擎访问/redirect/sso下的所有文件
Disallow: /trash/post	禁止所有搜索引擎访问/trash/post目录（包括子目录）
Disallow: /admin/*	禁止所有搜索引擎访问/admin下的所有文件
Disallow: /bbsapi/*	禁止所有搜索引擎访问/bbsapi下的所有文件
Disallow: /code.jpg	禁止所有搜索引擎访问根目录下的code.jpg文件
Disallow: /file/code.jpg	禁止所有搜索引擎访问/file目录下的code.jpg文件
Disallow: /post/edit	禁止所有搜索引擎访问/post/edit目录（包括子目录）
Disallow: /post/draft	禁止所有搜索引擎访问/post/draft目录（包括子目录）
Disallow: /post/reply	禁止所有搜索引擎访问/post/reply目录（包括子目录）
Disallow: /post/exchange	禁止所有搜索引擎访问/post/exchange目录（包括子目录）
Disallow: /rank/*	禁止所有搜索引擎访问/rank下的所有文件
Disallow: /download/*	禁止所有搜索引擎访问/download下的所有文件
Disallow: /file/upload	禁止所有搜索引擎访问/file/upload目录（包括子目录）
Disallow: /user/logout	禁止所有搜索引擎访问/user/logout目录（包括子目录）
Disallow: /empty	禁止所有搜索引擎访问/empty目录（包括子目录）
Disallow: /file/empty	禁止所有搜索引擎访问/file/empty目录（包括子目录）
Disallow: /bbs/file/admin/*	禁止所有搜索引擎访问/bbs/file/admin下的所有文件
Disallow: /bbs/code.jpg	禁止所有搜索引擎访问/bbs目录下的code.jpg文件
Disallow: /comment/iframe.do	禁止所有搜索引擎访问/comment目录下的iframe.do文件
Disallow: /login/guessoneguess	禁止所有搜索引擎访问/login/guessoneguess目录（包括子目录）
Disallow: /bbs/newweb/pc/pc/profile/	禁止所有搜索引擎访问/bbs/newweb/pc/pc/profile目录
Disallow: /bbs/post/similar?action=*	禁止所有搜索引擎访问similar,参数为action=*的页面
Disallow: /bbs/post/new?bid=*	禁止所有搜索引擎访问new,参数为bid=*的页面
Disallow: /bbs/post/view?bid=*	禁止所有搜索引擎访问view,参数为bid=*的页面

活动推荐

Robots检测