| User-agent: Abonti
|
开始配置：Abonti |
|
| Disallow: /
|
禁止Abonti访问网站的任何部分 |
|
| User-agent: ADmantX
|
开始配置：ADmantX |
|
| Disallow: /
|
禁止ADmantX访问网站的任何部分 |
|
| User-agent: admantx
|
开始配置：admantx |
|
| Disallow: /
|
禁止admantx访问网站的任何部分 |
|
| User-agent: AhrefsBot
|
开始配置：AhrefsBot |
|
| Disallow: /
|
禁止AhrefsBot访问网站的任何部分 |
|
| User-agent: babbar
|
开始配置：babbar |
|
| Disallow: /
|
禁止babbar访问网站的任何部分 |
|
| User-agent: BacklinkCrawler
|
开始配置：BacklinkCrawler |
|
| Disallow: /
|
禁止BacklinkCrawler访问网站的任何部分 |
|
| User-agent: BLEXBot
|
开始配置：BLEXBot |
|
| Disallow: /
|
禁止BLEXBot访问网站的任何部分 |
|
| User-agent: BPImageWalker
|
开始配置：BPImageWalker |
|
| Disallow: /
|
禁止BPImageWalker访问网站的任何部分 |
|
| User-agent: check_http
|
开始配置：check_http |
|
| Disallow: /
|
禁止check_http访问网站的任何部分 |
|
| User-agent: checks.panopta.com
|
开始配置：checks.panopta.com |
|
| Disallow: /
|
禁止checks.panopta.com访问网站的任何部分 |
|
| User-agent: DLE_Spider.exe
|
开始配置：DLE_Spider.exe |
|
| Disallow: /
|
禁止DLE_Spider.exe访问网站的任何部分 |
|
| User-agent: dotbot
|
开始配置：dotbot |
|
| Disallow: /
|
禁止dotbot访问网站的任何部分 |
|
| User-agent: EMail Exractor
|
开始配置：EMail Exractor |
|
| Disallow: /
|
禁止EMail Exractor访问网站的任何部分 |
|
| User-agent: Exabot
|
开始配置：Exabot |
|
| Disallow: /
|
禁止Exabot访问网站的任何部分 |
|
| User-agent: Ezooms
|
开始配置：Ezooms |
|
| Disallow: /
|
禁止Ezooms访问网站的任何部分 |
|
| User-agent: GbPlugin
|
开始配置：GbPlugin |
|
| Disallow: /
|
禁止GbPlugin访问网站的任何部分 |
|
| User-agent: grapeshot
|
开始配置：grapeshot |
|
| Disallow: /
|
禁止grapeshot访问网站的任何部分 |
|
| User-agent: gsa-crawler
|
开始配置：gsa-crawler |
|
| Disallow: /
|
禁止gsa-crawler访问网站的任何部分 |
|
| User-agent: HolmesBot
|
开始配置：HolmesBot |
|
| Disallow: /
|
禁止HolmesBot访问网站的任何部分 |
|
| User-agent: ichiro
|
开始配置：ichiro |
|
| Disallow: /
|
禁止ichiro访问网站的任何部分 |
|
| User-agent: Knowledge AI
|
开始配置：Knowledge AI |
|
| Disallow: /
|
禁止Knowledge AI访问网站的任何部分 |
|
| User-agent: Infoseek SideWinder
|
开始配置：Infoseek SideWinder |
|
| Disallow: /
|
禁止Infoseek SideWinder访问网站的任何部分 |
|
| User-agent: Infoseek SideWinder/2.0B (Linux 2.4 i686)
|
开始配置：Infoseek SideWinder/2.0B (Linux 2.4 i686) |
|
| Disallow: /
|
禁止Infoseek SideWinder/2.0B (Linux 2.4 i686)访问网站的任何部分 |
|
| User-agent: ip-web-crawler.com
|
开始配置：ip-web-crawler.com |
|
| Disallow: /
|
禁止ip-web-crawler.com访问网站的任何部分 |
|
| User-agent: Jakarta Commons-HttpClient
|
开始配置：Jakarta Commons-HttpClient |
|
| Disallow: /
|
禁止Jakarta Commons-HttpClient访问网站的任何部分 |
|
| User-agent: JikeSpider
|
开始配置：JikeSpider |
|
| Disallow: /
|
禁止JikeSpider访问网站的任何部分 |
|
| User-agent: libwww-perl
|
开始配置：libwww-perl |
|
| Disallow: /
|
禁止libwww-perl访问网站的任何部分 |
|
| User-agent: linkdex.com
|
开始配置：linkdex.com |
|
| Disallow: /
|
禁止linkdex.com访问网站的任何部分 |
|
| User-agent: Mail.RU_Bot
|
开始配置：Mail.RU_Bot |
|
| Disallow: /
|
禁止Mail.RU_Bot访问网站的任何部分 |
|
| User-agent: MJ12bot
|
开始配置：MJ12bot |
|
| Disallow: /
|
禁止MJ12bot访问网站的任何部分 |
|
| User-agent: MLBot
|
开始配置：MLBot |
|
| Disallow: /
|
禁止MLBot访问网站的任何部分 |
|
| User-agent: moget
|
开始配置：moget |
|
| Disallow: /
|
禁止moget访问网站的任何部分 |
|
| User-agent: NaverBot
|
开始配置：NaverBot |
|
| Disallow: /
|
禁止NaverBot访问网站的任何部分 |
|
| User-agent: PEAR HTTP_Request class
|
开始配置：PEAR HTTP_Request class |
|
| Disallow: /
|
禁止PEAR HTTP_Request class访问网站的任何部分 |
|
| User-agent: Pixray-Seeker
|
开始配置：Pixray-Seeker |
|
| Disallow: /
|
禁止Pixray-Seeker访问网站的任何部分 |
|
| User-agent: PycURL
|
开始配置：PycURL |
|
| Disallow: /
|
禁止PycURL访问网站的任何部分 |
|
| User-agent: python-requests
|
开始配置：python-requests |
|
| Disallow: /
|
禁止python-requests访问网站的任何部分 |
|
| User-agent: Python-urllib
|
开始配置：Python-urllib |
|
| Disallow: /
|
禁止Python-urllib访问网站的任何部分 |
|
| User-agent: rmnbot
|
开始配置：rmnbot |
|
| Disallow: /
|
禁止rmnbot访问网站的任何部分 |
|
| User-agent: Screaming Frog SEO Spider
|
开始配置：Screaming Frog SEO Spider |
|
| Disallow: /
|
禁止Screaming Frog SEO Spider访问网站的任何部分 |
|
| User-agent: SemrushBot
|
开始配置：SemrushBot |
|
| Disallow: /
|
禁止SemrushBot访问网站的任何部分 |
|
| User-agent: SEOENGWorldBot
|
开始配置：SEOENGWorldBot |
|
| Disallow: /
|
禁止SEOENGWorldBot访问网站的任何部分 |
|
| User-agent: SeznamBot
|
开始配置：SeznamBot |
|
| Disallow: /
|
禁止SeznamBot访问网站的任何部分 |
|
| User-agent: sitebot
|
开始配置：sitebot |
|
| Disallow: /
|
禁止sitebot访问网站的任何部分 |
|
| User-agent: Squider
|
开始配置：Squider |
|
| Disallow: /
|
禁止Squider访问网站的任何部分 |
|
| User-agent: ssearch_bot
|
开始配置：ssearch_bot |
|
| Disallow: /
|
禁止ssearch_bot访问网站的任何部分 |
|
| User-agent: Synapse
|
开始配置：Synapse |
|
| Disallow: /
|
禁止Synapse访问网站的任何部分 |
|
| User-agent: tkbot
|
开始配置：tkbot |
|
| Disallow: /
|
禁止tkbot访问网站的任何部分 |
|
| User-agent: webmeup
|
开始配置：webmeup |
|
| Disallow: /
|
禁止webmeup访问网站的任何部分 |
|
| User-agent: woopingbot
|
开始配置：woopingbot |
|
| Disallow: /
|
禁止woopingbot访问网站的任何部分 |
|
| User-agent: Wotbox
|
开始配置：Wotbox |
|
| Disallow: /
|
禁止Wotbox访问网站的任何部分 |
|
| User-agent: Xenu Link Sleuth
|
开始配置：Xenu Link Sleuth |
|
| Disallow: /
|
禁止Xenu Link Sleuth访问网站的任何部分 |
|
| User-agent: seoprofiler
|
开始配置：seoprofiler |
|
| Disallow: / |
禁止seoprofiler访问网站的任何部分 |
|
