| User-agent: *
|
开始配置：所有搜索引擎 |
|
| Disallow: /cgi-bin
|
禁止所有搜索引擎访问/cgi-bin目录（包括子目录） |
|
| Disallow: /game
|
禁止所有搜索引擎访问/game目录（包括子目录） |
|
| Disallow: /?
|
禁止所有搜索引擎访问,参数为的页面 |
|
| Disallow: /wp-
|
禁止所有搜索引擎访问/wp-目录（包括子目录） |
|
| Disallow: /wp/
|
禁止所有搜索引擎访问/wp目录 |
|
| Disallow: *?s=
|
禁止所有搜索引擎访问所有带参数为s=的页面 |
|
| Disallow: *&s=
|
禁止所有搜索引擎访问根目录下以&s=结尾的目录（包括子目录） |
|
| Disallow: /search/
|
禁止所有搜索引擎访问/search目录 |
|
| Disallow: /author/
|
禁止所有搜索引擎访问/author目录 |
|
| Disallow: /users/
|
禁止所有搜索引擎访问/users目录 |
|
| Disallow: */trackback
|
禁止所有搜索引擎访问*/trackback目录（包括子目录） |
|
| Disallow: */feed
|
禁止所有搜索引擎访问*/feed目录（包括子目录） |
|
| Disallow: */rss
|
禁止所有搜索引擎访问*/rss目录（包括子目录） |
|
| Disallow: */embed
|
禁止所有搜索引擎访问*/embed目录（包括子目录） |
|
| Disallow: */wlwmanifest.xml
|
禁止所有搜索引擎访问*目录下的wlwmanifest.xml文件 |
|
| Disallow: /xmlrpc.php
|
禁止所有搜索引擎访问根目录下的xmlrpc.php文件 |
|
| Disallow: *utm*=
|
禁止所有搜索引擎访问根目录下以utm*=结尾的目录（包括子目录） |
|
| Disallow: *openstat=
|
禁止所有搜索引擎访问根目录下以openstat=结尾的目录（包括子目录） |
|
| Allow: */uploads
|
允许所有搜索引擎访问*/uploads目录（包括子目录） |
|
| User-agent: GoogleBot
|
开始配置：GoogleBot |
|
| Disallow: /cgi-bin
|
禁止GoogleBot访问/cgi-bin目录（包括子目录） |
|
| Disallow: /game
|
禁止GoogleBot访问/game目录（包括子目录） |
|
| Disallow: /?
|
禁止GoogleBot访问,参数为的页面 |
|
| Disallow: /wp-
|
禁止GoogleBot访问/wp-目录（包括子目录） |
|
| Disallow: /wp/
|
禁止GoogleBot访问/wp目录 |
|
| Disallow: *?s=
|
禁止GoogleBot访问所有带参数为s=的页面 |
|
| Disallow: *&s=
|
禁止GoogleBot访问根目录下以&s=结尾的目录（包括子目录） |
|
| Disallow: /search/
|
禁止GoogleBot访问/search目录 |
|
| Disallow: /author/
|
禁止GoogleBot访问/author目录 |
|
| Disallow: /users/
|
禁止GoogleBot访问/users目录 |
|
| Disallow: */trackback
|
禁止GoogleBot访问*/trackback目录（包括子目录） |
|
| Disallow: */feed
|
禁止GoogleBot访问*/feed目录（包括子目录） |
|
| Disallow: */rss
|
禁止GoogleBot访问*/rss目录（包括子目录） |
|
| Disallow: */embed
|
禁止GoogleBot访问*/embed目录（包括子目录） |
|
| Disallow: */wlwmanifest.xml
|
禁止GoogleBot访问*目录下的wlwmanifest.xml文件 |
|
| Disallow: /xmlrpc.php
|
禁止GoogleBot访问根目录下的xmlrpc.php文件 |
|
| Disallow: *utm*=
|
禁止GoogleBot访问根目录下以utm*=结尾的目录（包括子目录） |
|
| Disallow: *openstat=
|
禁止GoogleBot访问根目录下以openstat=结尾的目录（包括子目录） |
|
| Allow: */uploads
|
允许GoogleBot访问*/uploads目录（包括子目录） |
|
| Allow: /*/*.js
|
允许GoogleBot访问/*目录下所有以.js为后缀的文件 |
|
| Allow: /*/*.css
|
允许GoogleBot访问/*目录下所有以.css为后缀的文件 |
|
| Allow: /wp-*.png
|
允许GoogleBot访问根目录下的wp-*.png文件 |
|
| Allow: /wp-*.jpg
|
允许GoogleBot访问根目录下的wp-*.jpg文件 |
|
| Allow: /wp-*.jpeg
|
允许GoogleBot访问根目录下的wp-*.jpeg文件 |
|
| Allow: /wp-*.gif
|
允许GoogleBot访问根目录下的wp-*.gif文件 |
|
| Allow: /wp-admin/admin-ajax.php |
允许GoogleBot访问/wp-admin目录下的admin-ajax.php文件 |
|
