| User-agent:*
|
开始配置：所有搜索引擎 |
|
| Disallow: /huangye/
|
禁止所有搜索引擎访问/huangye目录 |
|
| Disallow: /404.htm
|
禁止所有搜索引擎访问根目录下的404.htm文件 |
|
| Disallow: /member/
|
禁止所有搜索引擎访问/member目录 |
|
| Disallow: /u520net/
|
禁止所有搜索引擎访问/u520net目录 |
|
| Disallow: /inc/
|
禁止所有搜索引擎访问/inc目录 |
|
| Disallow: /bbs/askpost/
|
禁止所有搜索引擎访问/bbs/askpost目录 |
|
| Disallow: /bbs/user/
|
禁止所有搜索引擎访问/bbs/user目录 |
|
| Disallow: /search/
|
禁止所有搜索引擎访问/search目录 |
|
| Disallow: /addrinfo.asp
|
禁止所有搜索引擎访问根目录下的addrinfo.asp文件 |
|
| Disallow: /addrinfo_detail.asp
|
禁止所有搜索引擎访问根目录下的addrinfo_detail.asp文件 |
|
| Disallow: /about/link.html
|
禁止所有搜索引擎访问/about目录下的link.html文件 |
|
| Disallow: /login/
|
禁止所有搜索引擎访问/login目录 |
|
| Disallow: /login_jsh.asp
|
禁止所有搜索引擎访问根目录下的login_jsh.asp文件 |
|
| Disallow: /about/index.html
|
禁止所有搜索引擎访问/about目录下的index.html文件 |
|
| Disallow: /allcom.asp
|
禁止所有搜索引擎访问根目录下的allcom.asp文件 |
|
| Disallow: /help/
|
禁止所有搜索引擎访问/help目录 |
|
| Disallow: /vipinfo/
|
禁止所有搜索引擎访问/vipinfo目录 |
|
| Disallow: /service/expo/subject/
|
禁止所有搜索引擎访问/service/expo/subject目录 |
|
| Disallow: /service/expo/list/all.html
|
禁止所有搜索引擎访问/service/expo/list目录下的all.html文件 |
|
| Disallow: /job/*.asp
|
禁止所有搜索引擎访问/job目录下所有以.asp为后缀的文件 |
|
| Disallow: /ystong/
|
禁止所有搜索引擎访问/ystong目录 |
|
| Disallow: /ads/
|
禁止所有搜索引擎访问/ads目录 |
|
| Disallow: /js/
|
禁止所有搜索引擎访问/js目录 |
|
| Disallow: /job/
|
禁止所有搜索引擎访问/job目录 |
|
| Disallow: /Ptcom/js/
|
禁止所有搜索引擎访问/Ptcom/js目录 |
|
| Disallow: /Ptcom/image/
|
禁止所有搜索引擎访问/Ptcom/image目录 |
|
| Disallow: /Ptcom/images/
|
禁止所有搜索引擎访问/Ptcom/images目录 |
|
| Disallow: /error.html
|
禁止所有搜索引擎访问根目录下的error.html文件 |
|
| Disallow: /*.js$
|
禁止所有搜索引擎访问所有以*.js结尾的文件 |
|
| Disallow: /*.css$
|
禁止所有搜索引擎访问所有以*.css结尾的文件 |
|
| Disallow: /login/
|
禁止所有搜索引擎访问/login目录 |
|
| Disallow: /qq/
|
禁止所有搜索引擎访问/qq目录 |
|
| Disallow: /alltradeinfo.asp
|
禁止所有搜索引擎访问根目录下的alltradeinfo.asp文件 |
|
| Disallow: /productshow/Quotation.asp
|
禁止所有搜索引擎访问/productshow目录下的Quotation.asp文件 |
|
| Disallow: /vipcom/
|
禁止所有搜索引擎访问/vipcom目录 |
|
| Disallow: /disallow/
|
禁止所有搜索引擎访问/disallow目录 |
|
| Disallow: /html/
|
禁止所有搜索引擎访问/html目录 |
|
| Disallow: /UploadFile/infouppic/*.jpg
|
禁止所有搜索引擎访问/UploadFile/infouppic目录下所有以.jpg为后缀的文件 |
|
| Disallow: /tradeinfo/offerdetail/tuiweb.asp
|
禁止所有搜索引擎访问/tradeinfo/offerdetail目录下的tuiweb.asp文件 |
|
| User-agent: Baiduspider
|
开始配置：Baiduspider |
|
| Disallow: /tradeinfo/cp-*.html
|
禁止Baiduspider访问/tradeinfo目录下的cp-*.html文件 |
|
| Disallow: /productshow/bj-*.html
|
禁止Baiduspider访问/productshow目录下的bj-*.html文件 |
|
| Disallow: /huangye/
|
禁止Baiduspider访问/huangye目录 |
|
| Disallow: /404.htm
|
禁止Baiduspider访问根目录下的404.htm文件 |
|
| Disallow: /member/
|
禁止Baiduspider访问/member目录 |
|
| Disallow: /bbs/askpost/
|
禁止Baiduspider访问/bbs/askpost目录 |
|
| Disallow: /bbs/user/
|
禁止Baiduspider访问/bbs/user目录 |
|
| Disallow: /search/
|
禁止Baiduspider访问/search目录 |
|
| Disallow: /addrinfo.asp
|
禁止Baiduspider访问根目录下的addrinfo.asp文件 |
|
| Disallow: /addrinfo_detail.asp
|
禁止Baiduspider访问根目录下的addrinfo_detail.asp文件 |
|
| Disallow: /about/link.html
|
禁止Baiduspider访问/about目录下的link.html文件 |
|
| Disallow: /login/
|
禁止Baiduspider访问/login目录 |
|
| Disallow: /login_jsh.asp
|
禁止Baiduspider访问根目录下的login_jsh.asp文件 |
|
| Disallow: /about/index.html
|
禁止Baiduspider访问/about目录下的index.html文件 |
|
| Disallow: /allcom.asp
|
禁止Baiduspider访问根目录下的allcom.asp文件 |
|
| Disallow: /help/
|
禁止Baiduspider访问/help目录 |
|
| Disallow: /vipinfo/
|
禁止Baiduspider访问/vipinfo目录 |
|
| Disallow: /service/expo/subject/
|
禁止Baiduspider访问/service/expo/subject目录 |
|
| Disallow: /service/expo/list/all.html
|
禁止Baiduspider访问/service/expo/list目录下的all.html文件 |
|
| Disallow: /job/*.asp
|
禁止Baiduspider访问/job目录下所有以.asp为后缀的文件 |
|
| Disallow: /ystong/
|
禁止Baiduspider访问/ystong目录 |
|
| Disallow: /ads/
|
禁止Baiduspider访问/ads目录 |
|
| Disallow: /new/
|
禁止Baiduspider访问/new目录 |
|
| User-agent: MJ12bot
|
开始配置：MJ12bot |
|
| Disallow: /
|
禁止MJ12bot访问网站的任何部分 |
|
| User-agent: AhrefsBot
|
开始配置：AhrefsBot |
|
| Disallow: / |
禁止AhrefsBot访问网站的任何部分 |
|
