文件状态良好,请查看下面具体的报告。

    规则 解释 有效
    User-agent: Slurp 开始配置:Slurp
    Disallow: / 禁止Slurp访问网站的任何部分
    User-agent: Teoma 开始配置:Teoma
    Disallow: / 禁止Teoma访问网站的任何部分
    User-agent: ia_archiver 开始配置:ia_archiver
    Disallow: / 禁止ia_archiver访问网站的任何部分
    User-agent: twiceler 开始配置:twiceler
    Disallow: / 禁止twiceler访问网站的任何部分
    User-agent: Scrubby 开始配置:Scrubby
    Disallow: / 禁止Scrubby访问网站的任何部分
    User-agent: Robozilla 开始配置:Robozilla
    Disallow: / 禁止Robozilla访问网站的任何部分
    User-agent: Gigabot 开始配置:Gigabot
    Disallow: / 禁止Gigabot访问网站的任何部分
    User-agent: yahoo-mmcrawler 开始配置:yahoo-mmcrawler
    Disallow: / 禁止yahoo-mmcrawler访问网站的任何部分
    User-agent: yahoo-blogs/v3.9 开始配置:yahoo-blogs/v3.9
    Disallow: / 禁止yahoo-blogs/v3.9访问网站的任何部分
    User-agent: psbot 开始配置:psbot
    Disallow: / 禁止psbot访问网站的任何部分
    User-agent: SemrushBot 开始配置:SemrushBot
    Disallow: / 禁止SemrushBot访问网站的任何部分
    User-agent: AhrefsBot 开始配置:AhrefsBot
    Disallow: / 禁止AhrefsBot访问网站的任何部分
    User-agent: BLEXBot 开始配置:BLEXBot
    Disallow: / 禁止BLEXBot访问网站的任何部分
    User-agent: MJ12bot 开始配置:MJ12bot
    Disallow: / 禁止MJ12bot访问网站的任何部分
    User-agent: serpstatbot 开始配置:serpstatbot
    Disallow: / 禁止serpstatbot访问网站的任何部分
    User-agent: PetalBot 开始配置:PetalBot
    Disallow: / 禁止PetalBot访问网站的任何部分
    User-agent: dotbot 开始配置:dotbot
    Disallow: / 禁止dotbot访问网站的任何部分
    User-agent: DataForSeoBot 开始配置:DataForSeoBot
    Disallow: / 禁止DataForSeoBot访问网站的任何部分
    User-agent: Amazonbot 开始配置:Amazonbot
    Disallow: / 禁止Amazonbot访问网站的任何部分