| User-agent:*
|
开始配置：所有搜索引擎 |
|
| Disallow: /jobInfo/
|
禁止所有搜索引擎访问/jobInfo目录 |
|
| Disallow: /*?*
|
禁止所有搜索引擎访问任何带参数的页面 |
|
| Disallow: /data/
|
禁止所有搜索引擎访问/data目录 |
|
| Disallow: /ctrlcommon/
|
禁止所有搜索引擎访问/ctrlcommon目录 |
|
| Disallow: /plus/
|
禁止所有搜索引擎访问/plus目录 |
|
| Disallow: /member/
|
禁止所有搜索引擎访问/member目录 |
|
| Disallow: /uploads/
|
禁止所有搜索引擎访问/uploads目录 |
|
| Disallow: /include/
|
禁止所有搜索引擎访问/include目录 |
|
| Disallow: /ajax/
|
禁止所有搜索引擎访问/ajax目录 |
|
| Disallow: /web/
|
禁止所有搜索引擎访问/web目录 |
|
| Disallow: /ctrlcommon/
|
禁止所有搜索引擎访问/ctrlcommon目录 |
|
| Disallow: /enprise/
|
禁止所有搜索引擎访问/enprise目录 |
|
| Disallow: /city/
|
禁止所有搜索引擎访问/city目录 |
|
| Disallow: /www/
|
禁止所有搜索引擎访问/www目录 |
|
| Disallow: /userApplyManage/
|
禁止所有搜索引擎访问/userApplyManage目录 |
|
| Disallow: /ctrljobmanage/
|
禁止所有搜索引擎访问/ctrljobmanage目录 |
|
| Disallow: /ctrlindex/
|
禁止所有搜索引擎访问/ctrlindex目录 |
|
| Disallow: /ctrlmewusermanage/
|
禁止所有搜索引擎访问/ctrlmewusermanage目录 |
|
| Disallow: /ctrlenprise/
|
禁止所有搜索引擎访问/ctrlenprise目录 |
|
| Disallow: /favicon.ico/
|
禁止所有搜索引擎访问/favicon.ico目录 |
|
| Disallow: /wap/
|
禁止所有搜索引擎访问/wap目录 |
|
| Disallow: /pssPay/
|
禁止所有搜索引擎访问/pssPay目录 |
|
| Disallow: /daytask/
|
禁止所有搜索引擎访问/daytask目录 |
|
| Disallow: /channelapk/
|
禁止所有搜索引擎访问/channelapk目录 |
|
| Disallow: /ctrlenpublish/
|
禁止所有搜索引擎访问/ctrlenpublish目录 |
|
| Disallow: /ctrlmewtaskmanage/
|
禁止所有搜索引擎访问/ctrlmewtaskmanage目录 |
|
| Disallow: /ctrlmewclearing/
|
禁止所有搜索引擎访问/ctrlmewclearing目录 |
|
| Disallow: /user/
|
禁止所有搜索引擎访问/user目录 |
|
| Disallow: /login/
|
禁止所有搜索引擎访问/login目录 |
|
| Disallow: /appPage/
|
禁止所有搜索引擎访问/appPage目录 |
|
| Disallow: /oauth2/
|
禁止所有搜索引擎访问/oauth2目录 |
|
| Disallow: /captcha/
|
禁止所有搜索引擎访问/captcha目录 |
|
| Disallow: /miaoTaskVest/
|
禁止所有搜索引擎访问/miaoTaskVest目录 |
|
| Disallow: /linkTask/
|
禁止所有搜索引擎访问/linkTask目录 |
|
| Disallow: /geo/
|
禁止所有搜索引擎访问/geo目录 |
|
| Disallow: /acat/
|
禁止所有搜索引擎访问/acat目录 |
|
| Disallow: /authentication/
|
禁止所有搜索引擎访问/authentication目录 |
|
| Disallow: /oauth2/
|
禁止所有搜索引擎访问/oauth2目录 |
|
| Disallow: /skill/
|
禁止所有搜索引擎访问/skill目录 |
|
| Disallow: /static/
|
禁止所有搜索引擎访问/static目录 |
|
| Disallow: /city/
|
禁止所有搜索引擎访问/city目录 |
|
| Disallow: /job/getJob
|
禁止所有搜索引擎访问/job/getJob目录（包括子目录） |
|
| Disallow: /common/
|
禁止所有搜索引擎访问/common目录 |
|
| User-agent:msnbot
|
开始配置：msnbot |
|
| Disallow: /
|
禁止msnbot访问网站的任何部分 |
|
| User-agent:AhrefsBot
|
开始配置：AhrefsBot |
|
| Disallow: /
|
禁止AhrefsBot访问网站的任何部分 |
|
| User-agent:YandexBot
|
开始配置：YandexBot |
|
| Disallow: /
|
禁止YandexBot访问网站的任何部分 |
|
| User-agent:SemrushBot
|
开始配置：SemrushBot |
|
| Disallow: /
|
禁止SemrushBot访问网站的任何部分 |
|
| User-agent:SerpstatBot
|
开始配置：SerpstatBot |
|
| Disallow: /
|
禁止SerpstatBot访问网站的任何部分 |
|
| User-agent:DotBot
|
开始配置：DotBot |
|
| Disallow: /
|
禁止DotBot访问网站的任何部分 |
|
