文件状态良好,请查看下面具体的报告。

    规则 解释 有效
    User-agent: SemrushBot 开始配置:SemrushBot
    Disallow: / 禁止SemrushBot访问网站的任何部分
    User-agent: SemrushBot-SA 开始配置:SemrushBot-SA
    Disallow: / 禁止SemrushBot-SA访问网站的任何部分
    User-agent: SplitSignalBot 开始配置:SplitSignalBot
    Disallow: / 禁止SplitSignalBot访问网站的任何部分
    User-agent: SemrushBot-BM 开始配置:SemrushBot-BM
    Disallow: / 禁止SemrushBot-BM访问网站的任何部分
    User-agent: SemrushBot-CT 开始配置:SemrushBot-CT
    Disallow: / 禁止SemrushBot-CT访问网站的任何部分
    User-agent: SemrushBot-SWA 开始配置:SemrushBot-SWA
    Disallow: / 禁止SemrushBot-SWA访问网站的任何部分
    User-agent: SemrushBot-SI 开始配置:SemrushBot-SI
    Disallow: / 禁止SemrushBot-SI访问网站的任何部分
    User-agent: SemrushBot-BA 开始配置:SemrushBot-BA
    Disallow: / 禁止SemrushBot-BA访问网站的任何部分
    User-agent: Slurp 开始配置:Slurp
    Disallow: / 禁止Slurp访问网站的任何部分
    User-agent: Teoma 开始配置:Teoma
    Disallow: / 禁止Teoma访问网站的任何部分
    User-agent: ia_archiver 开始配置:ia_archiver
    Disallow: / 禁止ia_archiver访问网站的任何部分
    User-agent: twiceler 开始配置:twiceler
    Disallow: / 禁止twiceler访问网站的任何部分
    User-agent: MSNBot 开始配置:MSNBot
    Disallow: 允许MSNBot访问网站的任何部分
    User-agent: Scrubby 开始配置:Scrubby
    Disallow: / 禁止Scrubby访问网站的任何部分
    User-agent: Robozilla 开始配置:Robozilla
    Disallow: / 禁止Robozilla访问网站的任何部分
    User-agent: Gigabot 开始配置:Gigabot
    Disallow: / 禁止Gigabot访问网站的任何部分
    User-agent: yahoo-mmcrawler 开始配置:yahoo-mmcrawler
    Disallow: / 禁止yahoo-mmcrawler访问网站的任何部分
    User-agent: yahoo-blogs/v3.9 开始配置:yahoo-blogs/v3.9
    Disallow: / 禁止yahoo-blogs/v3.9访问网站的任何部分
    User-agent: psbot 开始配置:psbot
    Disallow: / 禁止psbot访问网站的任何部分
    User-agent: dotbot 开始配置:dotbot
    Disallow: / 禁止dotbot访问网站的任何部分
    User-agent: MJ12bot 开始配置:MJ12bot
    Disallow: / 禁止MJ12bot访问网站的任何部分
    User-agent: SMTBot 开始配置:SMTBot
    Disallow: / 禁止SMTBot访问网站的任何部分
    User-agent: PetalBot 开始配置:PetalBot
    Disallow: / 禁止PetalBot访问网站的任何部分
    User-agent: AhrefsBot 开始配置:AhrefsBot
    Disallow: / 禁止AhrefsBot访问网站的任何部分
    User-agent: CheckMarkNetwork 开始配置:CheckMarkNetwork
    Disallow: / 禁止CheckMarkNetwork访问网站的任何部分
    User-agent: DigiCert DCV Bot 开始配置:DigiCert DCV Bot
    Disallow: / 禁止DigiCert DCV Bot访问网站的任何部分
    User-agent: Amazonbot 开始配置:Amazonbot
    Disallow: / 禁止Amazonbot访问网站的任何部分
    User-agent: BLEXBot 开始配置:BLEXBot
    Disallow: / 禁止BLEXBot访问网站的任何部分