| User-agent: *
|
开始配置：所有搜索引擎 |
|
| Disallow: /*.action*
|
禁止所有搜索引擎访问所有以.action为后缀的文件 |
|
| Disallow: /*?*
|
禁止所有搜索引擎访问任何带参数的页面 |
|
| Disallow: /*!*
|
禁止所有搜索引擎访问所有包含!的文件 |
|
| Disallow: /*&*
|
禁止所有搜索引擎访问所有包含&的文件 |
|
| Disallow: /*%*
|
禁止所有搜索引擎访问所有包含%的文件 |
|
| Disallow: *.a.jiwu.com*
|
禁止所有搜索引擎访问所有以.a.jiwu.com为后缀的文件 |
|
| Disallow: /your-page-url
|
禁止所有搜索引擎访问/your-page-url目录（包括子目录） |
|
| Disallow: /sousuo/
|
禁止所有搜索引擎访问/sousuo目录 |
|
| Disallow: /js/
|
禁止所有搜索引擎访问/js目录 |
|
| Disallow: /data/
|
禁止所有搜索引擎访问/data目录 |
|
| Disallow: /jilu/
|
禁止所有搜索引擎访问/jilu目录 |
|
| Disallow: /loupan/jjr/
|
禁止所有搜索引擎访问/loupan/jjr目录 |
|
| Disallow: /jjr/
|
禁止所有搜索引擎访问/jjr目录 |
|
| Disallow: /jjr*
|
禁止所有搜索引擎访问根目录下以jjr开头的目录（包括子目录） |
|
| Disallow: /zygj*
|
禁止所有搜索引擎访问根目录下以zygj开头的目录（包括子目录） |
|
| Disallow: /huxing/list-q*
|
禁止所有搜索引擎访问/huxing目录下以list-q开头的目录（包括子目录） |
|
| Disallow: /wenda/list-key*
|
禁止所有搜索引擎访问/wenda目录下以list-key开头的目录（包括子目录） |
|
| Disallow: /wenda2/
|
禁止所有搜索引擎访问/wenda2目录 |
|
| Disallow: /esf/list-key*
|
禁止所有搜索引擎访问/esf目录下以list-key开头的目录（包括子目录） |
|
| Disallow: /esf/list-q*-q*
|
禁止所有搜索引擎访问/esf目录下以list-q*-q开头的目录（包括子目录） |
|
| Disallow: /esf/list-q*_*
|
禁止所有搜索引擎访问/esf目录下以list-q*_开头的目录（包括子目录） |
|
| Disallow: /esf/list-*x*
|
禁止所有搜索引擎访问/esf目录下以list-*x开头的目录（包括子目录） |
|
| Disallow: /loupan/esf/list-q*-q*
|
禁止所有搜索引擎访问/loupan/esf目录下以list-q*-q开头的目录（包括子目录） |
|
| Disallow: /loupan/esf/list-q*_*
|
禁止所有搜索引擎访问/loupan/esf目录下以list-q*_开头的目录（包括子目录） |
|
| Disallow: /loupan/esf/list*qh*
|
禁止所有搜索引擎访问/loupan/esf目录下以list*qh开头的目录（包括子目录） |
|
| Disallow: /loupan/esf/list-*x*
|
禁止所有搜索引擎访问/loupan/esf目录下以list-*x开头的目录（包括子目录） |
|
| Disallow: /loupan/list-q*_*
|
禁止所有搜索引擎访问/loupan目录下以list-q*_开头的目录（包括子目录） |
|
| Disallow: /loupan/list-*x*
|
禁止所有搜索引擎访问/loupan目录下以list-*x开头的目录（包括子目录） |
|
| Disallow: /loupan/list-key*
|
禁止所有搜索引擎访问/loupan目录下以list-key开头的目录（包括子目录） |
|
| Disallow: /loupan/*-qc-1.html$
|
禁止所有搜索引擎访问/loupan目录下所有以*-qc-1.html结尾的文件 |
|
| Disallow: /loupan/*-qu1.html$
|
禁止所有搜索引擎访问/loupan目录下所有以*-qu1.html结尾的文件 |
|
| Disallow: /xq_*
|
禁止所有搜索引擎访问根目录下以xq_开头的目录（包括子目录） |
|
| Disallow: /lpbg/*
|
禁止所有搜索引擎访问/lpbg下的所有文件 |
|
| Disallow: /lpfj/*
|
禁止所有搜索引擎访问/lpfj下的所有文件 |
|
| Disallow: /fang/
|
禁止所有搜索引擎访问/fang目录 |
|
| Disallow: /fang/*
|
禁止所有搜索引擎访问/fang下的所有文件 |
|
| Disallow: /xf/*
|
禁止所有搜索引擎访问/xf下的所有文件 |
|
| Disallow: /zhuanti/*/page*
|
禁止所有搜索引擎访问/zhuanti/*目录下以page开头的目录（包括子目录） |
|
| Disallow: /javascript*
|
禁止所有搜索引擎访问根目录下以javascript开头的目录（包括子目录） |
|
| Disallow: /adminer*
|
禁止所有搜索引擎访问根目录下以adminer开头的目录（包括子目录） |
|
| Disallow: /esf/fy-loupan*
|
禁止所有搜索引擎访问/esf目录下以fy-loupan开头的目录（包括子目录） |
|
| Disallow: /esf/list-o*-*
|
禁止所有搜索引擎访问/esf目录下以list-o*-开头的目录（包括子目录） |
|
| Disallow: /esf/list-page*-* |
禁止所有搜索引擎访问/esf目录下以list-page*-开头的目录（包括子目录） |
|
