| User-agent: * |
开始配置：所有搜索引擎 |
|
| Disallow: /ad*/ |
禁止所有搜索引擎访问根目录下以ad开头的目录 |
|
| Disallow: /api/ |
禁止所有搜索引擎访问/api目录 |
|
| Disallow: /archiver/ |
禁止所有搜索引擎访问/archiver目录 |
|
| Disallow: /member/ |
禁止所有搜索引擎访问/member目录 |
|
| Disallow: /skin/ |
禁止所有搜索引擎访问/skin目录 |
|
| Disallow: /template/ |
禁止所有搜索引擎访问/template目录 |
|
| Disallow: /wap/ |
禁止所有搜索引擎访问/wap目录 |
|
| Disallow: /install/ |
禁止所有搜索引擎访问/install目录 |
|
| Disallow: /upgrade/ |
禁止所有搜索引擎访问/upgrade目录 |
|
| Disallow: /include |
禁止所有搜索引擎访问/include目录（包括子目录） |
|
| Disallow: /module |
禁止所有搜索引擎访问/module目录（包括子目录） |
|
| Disallow: /*search-htm-* |
禁止所有搜索引擎访问所有包含search-htm-的文件 |
|
| Disallow: /*.js$ |
禁止所有搜索引擎访问所有以*.js结尾的文件 |
|
| Disallow: /*.css$ |
禁止所有搜索引擎访问所有以*.css结尾的文件 |
|
| User-agent: AhrefsBot |
开始配置：AhrefsBot |
|
| Disallow: / |
禁止AhrefsBot访问网站的任何部分 |
|
| User-agent: BLEXBot |
开始配置：BLEXBot |
|
| Disallow: / |
禁止BLEXBot访问网站的任何部分 |
|
| User-agent: DotBot |
开始配置：DotBot |
|
| Disallow: / |
禁止DotBot访问网站的任何部分 |
|
| User-agent: ICC-Crawler |
开始配置：ICC-Crawler |
|
| Disallow: / |
禁止ICC-Crawler访问网站的任何部分 |
|
| User-agent: MJ12bot |
开始配置：MJ12bot |
|
| Disallow: / |
禁止MJ12bot访问网站的任何部分 |
|
| User-agent: SemrushBot |
开始配置：SemrushBot |
|
| Disallow: / |
禁止SemrushBot访问网站的任何部分 |
|
| User-agent: SemrushBot-SA |
开始配置：SemrushBot-SA |
|
| Disallow: / |
禁止SemrushBot-SA访问网站的任何部分 |
|
| User-agent: SiteExplorer |
开始配置：SiteExplorer |
|
| Disallow: / |
禁止SiteExplorer访问网站的任何部分 |
|
| User-agent: Yahoo! Slurp |
开始配置：Yahoo! Slurp |
|
| Disallow: / |
禁止Yahoo! Slurp访问网站的任何部分 |
|
| User-agent: Yahoo! Slurp China |
开始配置：Yahoo! Slurp China |
|
| Disallow: / |
禁止Yahoo! Slurp China访问网站的任何部分 |
|
| User-agent: YandexBot |
开始配置：YandexBot |
|
| Disallow: / |
禁止YandexBot访问网站的任何部分 |
|
| User-agent: YandexImages |
开始配置：YandexImages |
|
| Disallow: / |
禁止YandexImages访问网站的任何部分 |
|
| User-agent: Exabot |
开始配置：Exabot |
|
| Disallow: / |
禁止Exabot访问网站的任何部分 |
|
| User-agent: msnbot |
开始配置：msnbot |
|
| Disallow: / |
禁止msnbot访问网站的任何部分 |
|
| User-agent: msnbot-media |
开始配置：msnbot-media |
|
| Disallow: / |
禁止msnbot-media访问网站的任何部分 |
|
| User-agent: EasouSpider |
开始配置：EasouSpider |
|
| Disallow: / |
禁止EasouSpider访问网站的任何部分 |
|
| User-agent: ezooms.bot |
开始配置：ezooms.bot |
|
| Disallow: / |
禁止ezooms.bot访问网站的任何部分 |
|
| User-agent: TurnitinBot |
开始配置：TurnitinBot |
|
| Disallow: / |
禁止TurnitinBot访问网站的任何部分 |
|
| User-agent: psbot |
开始配置：psbot |
|
| Disallow: / |
禁止psbot访问网站的任何部分 |
|
| Sitemap: http://www.qinfawang.com/sitemaps.xml |
Sitemap地址： http://www.qinfawang.com/sitemaps.xml |
|
