| User-agent: *
|
开始配置：所有搜索引擎 |
|
| Disallow: /wp-admin/*
|
禁止所有搜索引擎访问/wp-admin下的所有文件 |
|
| Disallow: /wp-includes/*
|
禁止所有搜索引擎访问/wp-includes下的所有文件 |
|
| Disallow: /wp-content/
|
禁止所有搜索引擎访问/wp-content目录 |
|
| Disallow: /trackback/*
|
禁止所有搜索引擎访问/trackback下的所有文件 |
|
| Disallow: /comments/*
|
禁止所有搜索引擎访问/comments下的所有文件 |
|
| Disallow: /attachment/*
|
禁止所有搜索引擎访问/attachment下的所有文件 |
|
| Disallow: /comments/feed/*
|
禁止所有搜索引擎访问/comments/feed下的所有文件 |
|
| Disallow: /plus/
|
禁止所有搜索引擎访问/plus目录 |
|
| Disallow: /*.jpg$
|
禁止所有搜索引擎访问所有以*.jpg结尾的文件 |
|
| Disallow: /*.jpeg$
|
禁止所有搜索引擎访问所有以*.jpeg结尾的文件 |
|
| Disallow: /*.gif$
|
禁止所有搜索引擎访问所有以*.gif结尾的文件 |
|
| Disallow: /*.png$
|
禁止所有搜索引擎访问所有以*.png结尾的文件 |
|
| Disallow: /*.bmp$
|
禁止所有搜索引擎访问所有以*.bmp结尾的文件 |
|
| Disallow: /data/
|
禁止所有搜索引擎访问/data目录 |
|
| Disallow: /feed/*
|
禁止所有搜索引擎访问/feed下的所有文件 |
|
| Disallow: /feed
|
禁止所有搜索引擎访问/feed目录（包括子目录） |
|
| Disallow: /*/feed
|
禁止所有搜索引擎访问/*/feed目录（包括子目录） |
|
| Disallow: /*/*/feed
|
禁止所有搜索引擎访问/*/*/feed目录（包括子目录） |
|
| Disallow: /*/comment-page-*
|
禁止所有搜索引擎访问/*目录下以comment-page-开头的目录（包括子目录） |
|
| Disallow: /*?replytocom=*
|
禁止所有搜索引擎访问所有带参数为replytocom=*的页面 |
|
| Disallow: /*/trackback
|
禁止所有搜索引擎访问/*/trackback目录（包括子目录） |
|
| Disallow: /wp-json
|
禁止所有搜索引擎访问/wp-json目录（包括子目录） |
|
| Disallow: /wp-json/
|
禁止所有搜索引擎访问/wp-json目录 |
|
| Disallow: /wp-json/*
|
禁止所有搜索引擎访问/wp-json下的所有文件 |
|
| Disallow: /wp-login.php
|
禁止所有搜索引擎访问根目录下的wp-login.php文件 |
|
| Disallow: /*.html/*
|
禁止所有搜索引擎访问/*.html下的所有文件 |
|
| Disallow: /author
|
禁止所有搜索引擎访问/author目录（包括子目录） |
|
| User-agent: Googlebot
|
开始配置：Googlebot |
|
| Disallow: /
|
禁止Googlebot访问网站的任何部分 |
|
| User-agent: MJ12bot
|
开始配置：MJ12bot |
|
| Disallow: /
|
禁止MJ12bot访问网站的任何部分 |
|
| User-agent: BLEXBot
|
开始配置：BLEXBot |
|
| Disallow: /
|
禁止BLEXBot访问网站的任何部分 |
|
| User-agent: SemrushBot
|
开始配置：SemrushBot |
|
| Disallow: /
|
禁止SemrushBot访问网站的任何部分 |
|
| User-agent: SemrushBot-SA
|
开始配置：SemrushBot-SA |
|
| Disallow: /
|
禁止SemrushBot-SA访问网站的任何部分 |
|
| user-agent: AhrefsBot
|
开始配置：AhrefsBot |
|
| disallow: /
|
禁止AhrefsBot访问网站的任何部分 |
|
| user-agent: ccbot
|
开始配置：ccbot |
|
| disallow: /
|
禁止ccbot访问网站的任何部分 |
|
| user-agent: PetalBot
|
开始配置：PetalBot |
|
| disallow: /
|
禁止PetalBot访问网站的任何部分 |
|
| user-agent: tracking bot
|
开始配置：tracking bot |
|
| disallow: /
|
禁止tracking bot访问网站的任何部分 |
|
| user-agent: Adsbot
|
开始配置：Adsbot |
|
| disallow: /
|
禁止Adsbot访问网站的任何部分 |
|
| User-agent: DataForSeoBot
|
开始配置：DataForSeoBot |
|
| Disallow: /
|
禁止DataForSeoBot访问网站的任何部分 |
|
| Sitemap: http://wydblog.cn/sitemap.xml |
Sitemap地址： http://wydblog.cn/sitemap.xml |
|
