| User-agent: * |
开始配置：所有搜索引擎 |
|
| Allow: /chanpin/index.html? |
允许所有搜索引擎访问index.html,参数为的页面 |
|
| Allow: /chanpin/--*.html |
允许所有搜索引擎访问/chanpin目录下的--*.html文件 |
|
| Allow: /topic/index.html? |
允许所有搜索引擎访问index.html,参数为的页面 |
|
| Allow: /member/profile.htm?memberId= |
允许所有搜索引擎访问profile.htm,参数为memberId=的页面 |
|
| Disallow: /tw/*/ |
禁止所有搜索引擎访问/tw目录下以结尾的目录 |
|
| Disallow: /chanpin/*?* |
禁止所有搜索引擎访问任何带参数的页面 |
|
| Disallow: /gongsi/*?* |
禁止所有搜索引擎访问任何带参数的页面 |
|
| Disallow: /qiye/*?* |
禁止所有搜索引擎访问任何带参数的页面 |
|
| Disallow: /similar/*?* |
禁止所有搜索引擎访问任何带参数的页面 |
|
| Disallow: /store/*?* |
禁止所有搜索引擎访问任何带参数的页面 |
|
| Disallow: /new/*?* |
禁止所有搜索引擎访问任何带参数的页面 |
|
| Disallow: /jiage/*?* |
禁止所有搜索引擎访问任何带参数的页面 |
|
| Disallow: /pic/*?* |
禁止所有搜索引擎访问任何带参数的页面 |
|
| Disallow: /yijiandaifa/*?* |
禁止所有搜索引擎访问任何带参数的页面 |
|
| Disallow: /*?* |
禁止所有搜索引擎访问任何带参数的页面 |
|
| Disallow: /chanpin/-*-0*.html |
禁止所有搜索引擎访问/chanpin目录下的-*-0*.html文件 |
|
| Disallow: /chanpin/-*-1*.html |
禁止所有搜索引擎访问/chanpin目录下的-*-1*.html文件 |
|
| Disallow: /chanpin/-*-2*.html |
禁止所有搜索引擎访问/chanpin目录下的-*-2*.html文件 |
|
| Disallow: /chanpin/-*-3*.html |
禁止所有搜索引擎访问/chanpin目录下的-*-3*.html文件 |
|
| Disallow: /chanpin/-*-4*.html |
禁止所有搜索引擎访问/chanpin目录下的-*-4*.html文件 |
|
| Disallow: /chanpin/-*-5*.html |
禁止所有搜索引擎访问/chanpin目录下的-*-5*.html文件 |
|
| Disallow: /chanpin/-*-6*.html |
禁止所有搜索引擎访问/chanpin目录下的-*-6*.html文件 |
|
| Disallow: /chanpin/-*-7*.html |
禁止所有搜索引擎访问/chanpin目录下的-*-7*.html文件 |
|
| Disallow: /chanpin/-*-8*.html |
禁止所有搜索引擎访问/chanpin目录下的-*-8*.html文件 |
|
| Disallow: /chanpin/-*-9*.html |
禁止所有搜索引擎访问/chanpin目录下的-*-9*.html文件 |
|
| Disallow: /gongsi/-*-0*.html |
禁止所有搜索引擎访问/gongsi目录下的-*-0*.html文件 |
|
| Disallow: /gongsi/-*-1*.html |
禁止所有搜索引擎访问/gongsi目录下的-*-1*.html文件 |
|
| Disallow: /gongsi/-*-2*.html |
禁止所有搜索引擎访问/gongsi目录下的-*-2*.html文件 |
|
| Disallow: /gongsi/-*-3*.html |
禁止所有搜索引擎访问/gongsi目录下的-*-3*.html文件 |
|
| Disallow: /gongsi/-*-4*.html |
禁止所有搜索引擎访问/gongsi目录下的-*-4*.html文件 |
|
| Disallow: /gongsi/-*-5*.html |
禁止所有搜索引擎访问/gongsi目录下的-*-5*.html文件 |
|
| Disallow: /gongsi/-*-6*.html |
禁止所有搜索引擎访问/gongsi目录下的-*-6*.html文件 |
|
| Disallow: /gongsi/-*-7*.html |
禁止所有搜索引擎访问/gongsi目录下的-*-7*.html文件 |
|
| Disallow: /gongsi/-*-8*.html |
禁止所有搜索引擎访问/gongsi目录下的-*-8*.html文件 |
|
| Disallow: /gongsi/-*-9*.html |
禁止所有搜索引擎访问/gongsi目录下的-*-9*.html文件 |
|
| Disallow: /? |
禁止所有搜索引擎访问,参数为的页面 |
|
| Disallow: /*?tracelog= |
禁止所有搜索引擎访问所有带参数为tracelog=的页面 |
|
| Disallow: /offerdetail/view_large_pics_*.html |
禁止所有搜索引擎访问/offerdetail目录下的view_large_pics_*.html文件 |
|
| Disallow: /company/offerlist/ |
禁止所有搜索引擎访问/company/offerlist目录 |
|
| Disallow: /company/*? |
禁止所有搜索引擎访问所有带参数为的页面 |
|
| Disallow: /company/turbine/ |
禁止所有搜索引擎访问/company/turbine目录 |
|
| Disallow: /company/post_company.htm |
禁止所有搜索引擎访问/company目录下的post_company.htm文件 |
|
| Disallow: /company/my_company.htm |
禁止所有搜索引擎访问/company目录下的my_company.htm文件 |
|
| Disallow: /company/company_contact.htm |
禁止所有搜索引擎访问/company目录下的company_contact.htm文件 |
|
| Disallow: /company/company_intro_detail.htm |
禁止所有搜索引擎访问/company目录下的company_intro_detail.htm文件 |
|
| Disallow: /company/buyer/ |
禁止所有搜索引擎访问/company/buyer目录 |
|
| Disallow: /buyer/turbine/ |
禁止所有搜索引擎访问/buyer/turbine目录 |
|
| Disallow: /member/ |
禁止所有搜索引擎访问/member目录 |
|
| Disallow: /member/ajax/ |
禁止所有搜索引擎访问/member/ajax目录 |
|
| Disallow: /seller/ |
禁止所有搜索引擎访问/seller目录 |
|
| Disallow: /offer/ |
禁止所有搜索引擎访问/offer目录 |
|
| Disallow: /catalog/ |
禁止所有搜索引擎访问/catalog目录 |
|
| Disallow: /athena/ |
禁止所有搜索引擎访问/athena目录 |
|
| Disallow: /alitalk/ |
禁止所有搜索引擎访问/alitalk目录 |
|
| Disallow: /album/ |
禁止所有搜索引擎访问/album目录 |
|
| Disallow: /ali/news/ |
禁止所有搜索引擎访问/ali/news目录 |
|
| Disallow: /bin/ |
禁止所有搜索引擎访问/bin目录 |
|
| Disallow: /myalibaba/ |
禁止所有搜索引擎访问/myalibaba目录 |
|
| Disallow: /work/ |
禁止所有搜索引擎访问/work目录 |
|
| Disallow: /loan/ |
禁止所有搜索引擎访问/loan目录 |
|
| Disallow: /product/ |
禁止所有搜索引擎访问/product目录 |
|
| Disallow: /ims/ |
禁止所有搜索引擎访问/ims目录 |
|
| Disallow: /community/ |
禁止所有搜索引擎访问/community目录 |
|
| Disallow: /message/ |
禁止所有搜索引擎访问/message目录 |
|
| Disallow: /others/ |
禁止所有搜索引擎访问/others目录 |
|
| Disallow: /bizexpress/ |
禁止所有搜索引擎访问/bizexpress目录 |
|
| Disallow: /domain/ |
禁止所有搜索引擎访问/domain目录 |
|
| Disallow: /misc/ |
禁止所有搜索引擎访问/misc目录 |
|
| Disallow: /flash/ |
禁止所有搜索引擎访问/flash目录 |
|
| Disallow: /index1.html |
禁止所有搜索引擎访问根目录下的index1.html文件 |
|
| Disallow: /message |
禁止所有搜索引擎访问/message目录（包括子目录） |
|
| Disallow: /taoshihui/ |
禁止所有搜索引擎访问/taoshihui目录 |
|
| Disallow: /pifa/ |
禁止所有搜索引擎访问/pifa目录 |
|
| User-agent: Baiduspider |
开始配置：Baiduspider |
|
| Allow: /chanpin/index.html? |
允许Baiduspider访问index.html,参数为的页面 |
|
| Allow: /chanpin/--*.html |
允许Baiduspider访问/chanpin目录下的--*.html文件 |
|
| Allow: /topic/index.html? |
允许Baiduspider访问index.html,参数为的页面 |
|
| Allow: /member/profile.htm?memberId= |
允许Baiduspider访问profile.htm,参数为memberId=的页面 |
|
| Disallow: /ask/* |
禁止Baiduspider访问/ask下的所有文件 |
|
| Disallow: /*?* |
禁止Baiduspider访问任何带参数的页面 |
|
| Disallow: /tw/*/ |
禁止Baiduspider访问/tw目录下以结尾的目录 |
|
| Disallow: /chanpin/*? |
禁止Baiduspider访问所有带参数为的页面 |
|
| Disallow: /gongsi/*? |
禁止Baiduspider访问所有带参数为的页面 |
|
| Disallow: /qiye/*? |
禁止Baiduspider访问所有带参数为的页面 |
|
| Disallow: /similar/*? |
禁止Baiduspider访问所有带参数为的页面 |
|
| Disallow: /chanpin/-*-0*.html |
禁止Baiduspider访问/chanpin目录下的-*-0*.html文件 |
|
| Disallow: /chanpin/-*-1*.html |
禁止Baiduspider访问/chanpin目录下的-*-1*.html文件 |
|
| Disallow: /chanpin/-*-2*.html |
禁止Baiduspider访问/chanpin目录下的-*-2*.html文件 |
|
| Disallow: /chanpin/-*-3*.html |
禁止Baiduspider访问/chanpin目录下的-*-3*.html文件 |
|
| Disallow: /chanpin/-*-4*.html |
禁止Baiduspider访问/chanpin目录下的-*-4*.html文件 |
|
| Disallow: /chanpin/-*-5*.html |
禁止Baiduspider访问/chanpin目录下的-*-5*.html文件 |
|
| Disallow: /chanpin/-*-6*.html |
禁止Baiduspider访问/chanpin目录下的-*-6*.html文件 |
|
| Disallow: /chanpin/-*-7*.html |
禁止Baiduspider访问/chanpin目录下的-*-7*.html文件 |
|
| Disallow: /chanpin/-*-8*.html |
禁止Baiduspider访问/chanpin目录下的-*-8*.html文件 |
|
| Disallow: /chanpin/-*-9*.html |
禁止Baiduspider访问/chanpin目录下的-*-9*.html文件 |
|
| Disallow: /gongsi/-*-0*.html |
禁止Baiduspider访问/gongsi目录下的-*-0*.html文件 |
|
| Disallow: /gongsi/-*-1*.html |
禁止Baiduspider访问/gongsi目录下的-*-1*.html文件 |
|
| Disallow: /gongsi/-*-2*.html |
禁止Baiduspider访问/gongsi目录下的-*-2*.html文件 |
|
| Disallow: /gongsi/-*-3*.html |
禁止Baiduspider访问/gongsi目录下的-*-3*.html文件 |
|
| Disallow: /gongsi/-*-4*.html |
禁止Baiduspider访问/gongsi目录下的-*-4*.html文件 |
|
| Disallow: /gongsi/-*-5*.html |
禁止Baiduspider访问/gongsi目录下的-*-5*.html文件 |
|
| Disallow: /gongsi/-*-6*.html |
禁止Baiduspider访问/gongsi目录下的-*-6*.html文件 |
|
| Disallow: /gongsi/-*-7*.html |
禁止Baiduspider访问/gongsi目录下的-*-7*.html文件 |
|
| Disallow: /gongsi/-*-8*.html |
禁止Baiduspider访问/gongsi目录下的-*-8*.html文件 |
|
| Disallow: /gongsi/-*-9*.html |
禁止Baiduspider访问/gongsi目录下的-*-9*.html文件 |
|
| Disallow: /? |
禁止Baiduspider访问,参数为的页面 |
|
| Disallow: /*?tracelog= |
禁止Baiduspider访问所有带参数为tracelog=的页面 |
|
| Disallow: /offerdetail/view_large_pics_*.html |
禁止Baiduspider访问/offerdetail目录下的view_large_pics_*.html文件 |
|
| Disallow: /company/offerlist/ |
禁止Baiduspider访问/company/offerlist目录 |
|
| Disallow: /company/*? |
禁止Baiduspider访问所有带参数为的页面 |
|
| Disallow: /company/turbine/ |
禁止Baiduspider访问/company/turbine目录 |
|
| Disallow: /company/post_company.htm |
禁止Baiduspider访问/company目录下的post_company.htm文件 |
|
| Disallow: /company/my_company.htm |
禁止Baiduspider访问/company目录下的my_company.htm文件 |
|
| Disallow: /company/company_contact.htm |
禁止Baiduspider访问/company目录下的company_contact.htm文件 |
|
| Disallow: /company/company_intro_detail.htm |
禁止Baiduspider访问/company目录下的company_intro_detail.htm文件 |
|
| Disallow: /company/buyer/ |
禁止Baiduspider访问/company/buyer目录 |
|
| Disallow: /buyer/turbine/ |
禁止Baiduspider访问/buyer/turbine目录 |
|
| Disallow: /member/ |
禁止Baiduspider访问/member目录 |
|
| Disallow: /member/ajax/ |
禁止Baiduspider访问/member/ajax目录 |
|
| Disallow: /seller/ |
禁止Baiduspider访问/seller目录 |
|
| Disallow: /offer/ |
禁止Baiduspider访问/offer目录 |
|
| Disallow: /catalog/ |
禁止Baiduspider访问/catalog目录 |
|
| Disallow: /athena/ |
禁止Baiduspider访问/athena目录 |
|
| Disallow: /alitalk/ |
禁止Baiduspider访问/alitalk目录 |
|
| Disallow: /album/ |
禁止Baiduspider访问/album目录 |
|
| Disallow: /ali/news/ |
禁止Baiduspider访问/ali/news目录 |
|
| Disallow: /bin/ |
禁止Baiduspider访问/bin目录 |
|
| Disallow: /myalibaba/ |
禁止Baiduspider访问/myalibaba目录 |
|
| Disallow: /work/ |
禁止Baiduspider访问/work目录 |
|
| Disallow: /loan/ |
禁止Baiduspider访问/loan目录 |
|
| Disallow: /product/ |
禁止Baiduspider访问/product目录 |
|
| Disallow: /ims/ |
禁止Baiduspider访问/ims目录 |
|
| Disallow: /community/ |
禁止Baiduspider访问/community目录 |
|
| Disallow: /message/ |
禁止Baiduspider访问/message目录 |
|
| Disallow: /others/ |
禁止Baiduspider访问/others目录 |
|
| Disallow: /bizexpress/ |
禁止Baiduspider访问/bizexpress目录 |
|
| Disallow: /domain/ |
禁止Baiduspider访问/domain目录 |
|
| Disallow: /misc/ |
禁止Baiduspider访问/misc目录 |
|
| Disallow: /flash/ |
禁止Baiduspider访问/flash目录 |
|
| Disallow: /index1.html |
禁止Baiduspider访问根目录下的index1.html文件 |
|
| Disallow: /message |
禁止Baiduspider访问/message目录（包括子目录） |
|
| Disallow: /taoshihui/ |
禁止Baiduspider访问/taoshihui目录 |
|
| Disallow: /qingqu/* |
禁止Baiduspider访问/qingqu下的所有文件 |
|
| Disallow: /video/* |
禁止Baiduspider访问/video下的所有文件 |
|
| Disallow: /top/* |
禁止Baiduspider访问/top下的所有文件 |
|
| User-agent: Googlebot |
开始配置：Googlebot |
|
| Disallow: / |
禁止Googlebot访问网站的任何部分 |
|
| Allow: /xunjia/ |
允许Googlebot访问/xunjia目录 |
|
| Allow: /seorush-sitemap/ |
允许Googlebot访问/seorush-sitemap目录 |
|
| Allow: /baojia/ |
允许Googlebot访问/baojia目录 |
|
| Allow: /howmuch/ |
允许Googlebot访问/howmuch目录 |
|
| Allow: /pingjia/ |
允许Googlebot访问/pingjia目录 |
|
| Allow: /dingzhi/ |
允许Googlebot访问/dingzhi目录 |
|
| Allow: /jiagong/ |
允许Googlebot访问/jiagong目录 |
|
| Allow: /changhuo/ |
允许Googlebot访问/changhuo目录 |
|
| Allow: /yangpin/ |
允许Googlebot访问/yangpin目录 |
|
| Allow: /gongchang/ |
允许Googlebot访问/gongchang目录 |
|
| Allow: /changjia/ |
允许Googlebot访问/changjia目录 |
|
| Allow: /bangdan/ |
允许Googlebot访问/bangdan目录 |
|
| Allow: /factory/ |
允许Googlebot访问/factory目录 |
|
| User-agent: bingbot |
开始配置：bingbot |
|
| Allow: /xunjia/ |
允许bingbot访问/xunjia目录 |
|
| Allow: /seorush-sitemap/ |
允许bingbot访问/seorush-sitemap目录 |
|
| Allow: /baojia/ |
允许bingbot访问/baojia目录 |
|
| Allow: /howmuch/ |
允许bingbot访问/howmuch目录 |
|
| Allow: /pingjia/ |
允许bingbot访问/pingjia目录 |
|
| Allow: /dingzhi/ |
允许bingbot访问/dingzhi目录 |
|
| Allow: /jiagong/ |
允许bingbot访问/jiagong目录 |
|
| Allow: /changhuo/ |
允许bingbot访问/changhuo目录 |
|
| Allow: /yangpin/ |
允许bingbot访问/yangpin目录 |
|
| Allow: /gongchang/ |
允许bingbot访问/gongchang目录 |
|
| Allow: /changjia/ |
允许bingbot访问/changjia目录 |
|
| Allow: /bangdan/ |
允许bingbot访问/bangdan目录 |
|
| Allow: /factory/ |
允许bingbot访问/factory目录 |
|
| User-agent: MSNBot |
开始配置：MSNBot |
|
| Allow: /chanpin/index.html? |
允许MSNBot访问index.html,参数为的页面 |
|
| Allow: /chanpin/--*.html |
允许MSNBot访问/chanpin目录下的--*.html文件 |
|
| Allow: /topic/index.html? |
允许MSNBot访问index.html,参数为的页面 |
|
| Allow: /member/profile.htm?memberId= |
允许MSNBot访问profile.htm,参数为memberId=的页面 |
|
| Allow: /tw/*/ |
允许MSNBot访问/tw目录下以结尾的目录 |
|
| Allow: /xunjia/ |
允许MSNBot访问/xunjia目录 |
|
| Allow: /seorush-sitemap/ |
允许MSNBot访问/seorush-sitemap目录 |
|
| Allow: /baojia/ |
允许MSNBot访问/baojia目录 |
|
| Allow: /howmuch/ |
允许MSNBot访问/howmuch目录 |
|
| Allow: /pingjia/ |
允许MSNBot访问/pingjia目录 |
|
| Allow: /dingzhi/ |
允许MSNBot访问/dingzhi目录 |
|
| Allow: /jiagong/ |
允许MSNBot访问/jiagong目录 |
|
| Allow: /changhuo/ |
允许MSNBot访问/changhuo目录 |
|
| Allow: /yangpin/ |
允许MSNBot访问/yangpin目录 |
|
| Allow: /gongchang/ |
允许MSNBot访问/gongchang目录 |
|
| Allow: /changjia/ |
允许MSNBot访问/changjia目录 |
|
| Allow: /bangdan/ |
允许MSNBot访问/bangdan目录 |
|
| Allow: /factory/ |
允许MSNBot访问/factory目录 |
|
| Disallow: /chanpin/*.html |
禁止MSNBot访问/chanpin目录下所有以.html为后缀的文件 |
|
| Disallow: /gongsi/*.html |
禁止MSNBot访问/gongsi目录下所有以.html为后缀的文件 |
|
| Disallow: /qiye/*? |
禁止MSNBot访问所有带参数为的页面 |
|
| Disallow: /similar/*? |
禁止MSNBot访问所有带参数为的页面 |
|
| Disallow: /qiye/ |
禁止MSNBot访问/qiye目录 |
|
| Disallow: /cluster/ |
禁止MSNBot访问/cluster目录 |
|
| Disallow: /zhuanti/ |
禁止MSNBot访问/zhuanti目录 |
|
| Disallow: /2yuandian/ |
禁止MSNBot访问/2yuandian目录 |
|
| Disallow: /? |
禁止MSNBot访问,参数为的页面 |
|
| Disallow: /*?tracelog= |
禁止MSNBot访问所有带参数为tracelog=的页面 |
|
| Disallow: /offerdetail/view_large_pics_*.html |
禁止MSNBot访问/offerdetail目录下的view_large_pics_*.html文件 |
|
| Disallow: /company/offerlist/ |
禁止MSNBot访问/company/offerlist目录 |
|
| Disallow: /company/*? |
禁止MSNBot访问所有带参数为的页面 |
|
| Disallow: /company/turbine/ |
禁止MSNBot访问/company/turbine目录 |
|
| Disallow: /company/post_company.htm |
禁止MSNBot访问/company目录下的post_company.htm文件 |
|
| Disallow: /company/my_company.htm |
禁止MSNBot访问/company目录下的my_company.htm文件 |
|
| Disallow: /company/company_contact.htm |
禁止MSNBot访问/company目录下的company_contact.htm文件 |
|
| Disallow: /company/company_intro_detail.htm |
禁止MSNBot访问/company目录下的company_intro_detail.htm文件 |
|
| Disallow: /company/buyer/ |
禁止MSNBot访问/company/buyer目录 |
|
| Disallow: /buyer/turbine/ |
禁止MSNBot访问/buyer/turbine目录 |
|
| Disallow: /member/ |
禁止MSNBot访问/member目录 |
|
| Disallow: /member/ajax/ |
禁止MSNBot访问/member/ajax目录 |
|
| Disallow: /seller/ |
禁止MSNBot访问/seller目录 |
|
| Disallow: /offer/ |
禁止MSNBot访问/offer目录 |
|
| Disallow: /catalog/ |
禁止MSNBot访问/catalog目录 |
|
| Disallow: /athena/ |
禁止MSNBot访问/athena目录 |
|
| Disallow: /alitalk/ |
禁止MSNBot访问/alitalk目录 |
|
| Disallow: /album/ |
禁止MSNBot访问/album目录 |
|
| Disallow: /ali/news/ |
禁止MSNBot访问/ali/news目录 |
|
| Disallow: /bin/ |
禁止MSNBot访问/bin目录 |
|
| Disallow: /myalibaba/ |
禁止MSNBot访问/myalibaba目录 |
|
| Disallow: /work/ |
禁止MSNBot访问/work目录 |
|
| Disallow: /loan/ |
禁止MSNBot访问/loan目录 |
|
| Disallow: /product/ |
禁止MSNBot访问/product目录 |
|
| Disallow: /ims/ |
禁止MSNBot访问/ims目录 |
|
| Disallow: /community/ |
禁止MSNBot访问/community目录 |
|
| Disallow: /message/ |
禁止MSNBot访问/message目录 |
|
| Disallow: /others/ |
禁止MSNBot访问/others目录 |
|
| Disallow: /bizexpress/ |
禁止MSNBot访问/bizexpress目录 |
|
| Disallow: /domain/ |
禁止MSNBot访问/domain目录 |
|
| Disallow: /misc/ |
禁止MSNBot访问/misc目录 |
|
| Disallow: /flash/ |
禁止MSNBot访问/flash目录 |
|
| Disallow: /index1.html |
禁止MSNBot访问根目录下的index1.html文件 |
|
| Disallow: /message |
禁止MSNBot访问/message目录（包括子目录） |
|
| Disallow: /taoshihui/ |
禁止MSNBot访问/taoshihui目录 |
|
| Disallow: /chanpin/-*-0*.html |
禁止MSNBot访问/chanpin目录下的-*-0*.html文件 |
|
| Disallow: /chanpin/-*-1*.html |
禁止MSNBot访问/chanpin目录下的-*-1*.html文件 |
|
| Disallow: /chanpin/-*-2*.html |
禁止MSNBot访问/chanpin目录下的-*-2*.html文件 |
|
| Disallow: /chanpin/-*-3*.html |
禁止MSNBot访问/chanpin目录下的-*-3*.html文件 |
|
| Disallow: /chanpin/-*-4*.html |
禁止MSNBot访问/chanpin目录下的-*-4*.html文件 |
|
| Disallow: /chanpin/-*-5*.html |
禁止MSNBot访问/chanpin目录下的-*-5*.html文件 |
|
| Disallow: /chanpin/-*-6*.html |
禁止MSNBot访问/chanpin目录下的-*-6*.html文件 |
|
| Disallow: /chanpin/-*-7*.html |
禁止MSNBot访问/chanpin目录下的-*-7*.html文件 |
|
| Disallow: /chanpin/-*-8*.html |
禁止MSNBot访问/chanpin目录下的-*-8*.html文件 |
|
| Disallow: /chanpin/-*-9*.html |
禁止MSNBot访问/chanpin目录下的-*-9*.html文件 |
|
| User-agent: 360Spider |
开始配置：360Spider |
|
| Allow: /chanpin/index.html? |
允许360Spider访问index.html,参数为的页面 |
|
| Allow: /chanpin/--*.html |
允许360Spider访问/chanpin目录下的--*.html文件 |
|
| Allow: /topic/index.html? |
允许360Spider访问index.html,参数为的页面 |
|
| Allow: /member/profile.htm?memberId= |
允许360Spider访问profile.htm,参数为memberId=的页面 |
|
| Allow: /tw/*/ |
允许360Spider访问/tw目录下以结尾的目录 |
|
| Disallow: /*?* |
禁止360Spider访问任何带参数的页面 |
|
| Disallow: /chanpin/*? |
禁止360Spider访问所有带参数为的页面 |
|
| Disallow: /gongsi/*? |
禁止360Spider访问所有带参数为的页面 |
|
| Disallow: /qiye/*? |
禁止360Spider访问所有带参数为的页面 |
|
| Disallow: /similar/*? |
禁止360Spider访问所有带参数为的页面 |
|
| Disallow: /chanpin/-*-0*.html |
禁止360Spider访问/chanpin目录下的-*-0*.html文件 |
|
| Disallow: /chanpin/-*-1*.html |
禁止360Spider访问/chanpin目录下的-*-1*.html文件 |
|
| Disallow: /chanpin/-*-2*.html |
禁止360Spider访问/chanpin目录下的-*-2*.html文件 |
|
| Disallow: /chanpin/-*-3*.html |
禁止360Spider访问/chanpin目录下的-*-3*.html文件 |
|
| Disallow: /chanpin/-*-4*.html |
禁止360Spider访问/chanpin目录下的-*-4*.html文件 |
|
| Disallow: /chanpin/-*-5*.html |
禁止360Spider访问/chanpin目录下的-*-5*.html文件 |
|
| Disallow: /chanpin/-*-6*.html |
禁止360Spider访问/chanpin目录下的-*-6*.html文件 |
|
| Disallow: /chanpin/-*-7*.html |
禁止360Spider访问/chanpin目录下的-*-7*.html文件 |
|
| Disallow: /chanpin/-*-8*.html |
禁止360Spider访问/chanpin目录下的-*-8*.html文件 |
|
| Disallow: /chanpin/-*-9*.html |
禁止360Spider访问/chanpin目录下的-*-9*.html文件 |
|
| Disallow: /gongsi/-*-0*.html |
禁止360Spider访问/gongsi目录下的-*-0*.html文件 |
|
| Disallow: /gongsi/-*-1*.html |
禁止360Spider访问/gongsi目录下的-*-1*.html文件 |
|
| Disallow: /gongsi/-*-2*.html |
禁止360Spider访问/gongsi目录下的-*-2*.html文件 |
|
| Disallow: /gongsi/-*-3*.html |
禁止360Spider访问/gongsi目录下的-*-3*.html文件 |
|
| Disallow: /gongsi/-*-4*.html |
禁止360Spider访问/gongsi目录下的-*-4*.html文件 |
|
| Disallow: /gongsi/-*-5*.html |
禁止360Spider访问/gongsi目录下的-*-5*.html文件 |
|
| Disallow: /gongsi/-*-6*.html |
禁止360Spider访问/gongsi目录下的-*-6*.html文件 |
|
| Disallow: /gongsi/-*-7*.html |
禁止360Spider访问/gongsi目录下的-*-7*.html文件 |
|
| Disallow: /gongsi/-*-8*.html |
禁止360Spider访问/gongsi目录下的-*-8*.html文件 |
|
| Disallow: /gongsi/-*-9*.html |
禁止360Spider访问/gongsi目录下的-*-9*.html文件 |
|
| Disallow: /? |
禁止360Spider访问,参数为的页面 |
|
| Disallow: /*?tracelog= |
禁止360Spider访问所有带参数为tracelog=的页面 |
|
| Disallow: /offerdetail/view_large_pics_*.html |
禁止360Spider访问/offerdetail目录下的view_large_pics_*.html文件 |
|
| Disallow: /company/offerlist/ |
禁止360Spider访问/company/offerlist目录 |
|
| Disallow: /company/*? |
禁止360Spider访问所有带参数为的页面 |
|
| Disallow: /company/turbine/ |
禁止360Spider访问/company/turbine目录 |
|
| Disallow: /company/post_company.htm |
禁止360Spider访问/company目录下的post_company.htm文件 |
|
| Disallow: /company/my_company.htm |
禁止360Spider访问/company目录下的my_company.htm文件 |
|
| Disallow: /company/company_contact.htm |
禁止360Spider访问/company目录下的company_contact.htm文件 |
|
| Disallow: /company/company_intro_detail.htm |
禁止360Spider访问/company目录下的company_intro_detail.htm文件 |
|
| Disallow: /company/buyer/ |
禁止360Spider访问/company/buyer目录 |
|
| Disallow: /buyer/turbine/ |
禁止360Spider访问/buyer/turbine目录 |
|
| Disallow: /member/ |
禁止360Spider访问/member目录 |
|
| Disallow: /member/ajax/ |
禁止360Spider访问/member/ajax目录 |
|
| Disallow: /seller/ |
禁止360Spider访问/seller目录 |
|
| Disallow: /offer/ |
禁止360Spider访问/offer目录 |
|
| Disallow: /catalog/ |
禁止360Spider访问/catalog目录 |
|
| Disallow: /athena/ |
禁止360Spider访问/athena目录 |
|
| Disallow: /alitalk/ |
禁止360Spider访问/alitalk目录 |
|
| Disallow: /album/ |
禁止360Spider访问/album目录 |
|
| Disallow: /ali/news/ |
禁止360Spider访问/ali/news目录 |
|
| Disallow: /bin/ |
禁止360Spider访问/bin目录 |
|
| Disallow: /myalibaba/ |
禁止360Spider访问/myalibaba目录 |
|
| Disallow: /work/ |
禁止360Spider访问/work目录 |
|
| Disallow: /loan/ |
禁止360Spider访问/loan目录 |
|
| Disallow: /product/ |
禁止360Spider访问/product目录 |
|
| Disallow: /ims/ |
禁止360Spider访问/ims目录 |
|
| Disallow: /community/ |
禁止360Spider访问/community目录 |
|
| Disallow: /message/ |
禁止360Spider访问/message目录 |
|
| Disallow: /others/ |
禁止360Spider访问/others目录 |
|
| Disallow: /bizexpress/ |
禁止360Spider访问/bizexpress目录 |
|
| Disallow: /domain/ |
禁止360Spider访问/domain目录 |
|
| Disallow: /misc/ |
禁止360Spider访问/misc目录 |
|
| Disallow: /flash/ |
禁止360Spider访问/flash目录 |
|
| Disallow: /index1.html |
禁止360Spider访问根目录下的index1.html文件 |
|
| Disallow: /message |
禁止360Spider访问/message目录（包括子目录） |
|
| Disallow: /taoshihui/ |
禁止360Spider访问/taoshihui目录 |
|
