文件状态良好,请查看下面具体的报告。

    规则 解释 有效
    User-Agent: * 开始配置:所有搜索引擎
    Disallow: /admin/* 禁止所有搜索引擎访问/admin下的所有文件
    Disallow: /plus/* 禁止所有搜索引擎访问/plus下的所有文件
    Disallow: /install/* 禁止所有搜索引擎访问/install下的所有文件
    Disallow: /data/* 禁止所有搜索引擎访问/data下的所有文件
    Disallow: /plug/* 禁止所有搜索引擎访问/plug下的所有文件
    Disallow: /internal/* 禁止所有搜索引擎访问/internal下的所有文件
    Disallow: /auth/* 禁止所有搜索引擎访问/auth下的所有文件
    Disallow: /api/* 禁止所有搜索引擎访问/api下的所有文件
    Disallow: /datas/* 禁止所有搜索引擎访问/datas下的所有文件
    Disallow: /wxexponent/* 禁止所有搜索引擎访问/wxexponent下的所有文件
    Disallow: /mp_platform/* 禁止所有搜索引擎访问/mp_platform下的所有文件
    User-Agent: YandexBot 开始配置:YandexBot
    Disallow: / 禁止YandexBot访问网站的任何部分
    User-Agent: AhrefsBot 开始配置:AhrefsBot
    Disallow: / 禁止AhrefsBot访问网站的任何部分
    User-Agent: GrapeshotCrawler 开始配置:GrapeshotCrawler
    Disallow: / 禁止GrapeshotCrawler访问网站的任何部分
    User-Agent: ToutiaoSpider 开始配置:ToutiaoSpider
    Disallow: / 禁止ToutiaoSpider访问网站的任何部分
    User-Agent: DeuSu 开始配置:DeuSu
    Disallow: / 禁止DeuSu访问网站的任何部分
    User-Agent: Qwantify 开始配置:Qwantify
    Disallow: / 禁止Qwantify访问网站的任何部分
    User-Agent: YYSpider 开始配置:YYSpider
    Disallow: / 禁止YYSpider访问网站的任何部分
    User-Agent: Steeler 开始配置:Steeler
    Disallow: / 禁止Steeler访问网站的任何部分
    User-Agent: EasouSpider 开始配置:EasouSpider
    Disallow: / 禁止EasouSpider访问网站的任何部分
    User-Agent: JikeSpider 开始配置:JikeSpider
    Disallow: / 禁止JikeSpider访问网站的任何部分
    User-Agent: DotBot 开始配置:DotBot
    Disallow: / 禁止DotBot访问网站的任何部分
    User-Agent: Mail.RU_Bot 开始配置:Mail.RU_Bot
    Disallow: / 禁止Mail.RU_Bot访问网站的任何部分
    User-Agent: MagiBot 开始配置:MagiBot
    Disallow: / 禁止MagiBot访问网站的任何部分
    User-Agent: Cliqzbot 开始配置:Cliqzbot
    Disallow: / 禁止Cliqzbot访问网站的任何部分
    User-Agent: archive.org_bot 开始配置:archive.org_bot
    Disallow: / 禁止archive.org_bot访问网站的任何部分
    User-Agent: MJ12bot 开始配置:MJ12bot
    Disallow: / 禁止MJ12bot访问网站的任何部分
    User-Agent: Digincore bot 开始配置:Digincore bot
    Disallow: / 禁止Digincore bot访问网站的任何部分
    User-Agent: Exabot 开始配置:Exabot
    Disallow: / 禁止Exabot访问网站的任何部分
    User-Agent: Genieo 开始配置:Genieo
    Disallow: / 禁止Genieo访问网站的任何部分
    User-Agent: special_archiver 开始配置:special_archiver
    Disallow: / 禁止special_archiver访问网站的任何部分
    User-Agent: coccoc 开始配置:coccoc
    Disallow: / 禁止coccoc访问网站的任何部分
    User-Agent: Ezooms 开始配置:Ezooms
    Disallow: / 禁止Ezooms访问网站的任何部分
    User-Agent: Gluten Free Crawler 开始配置:Gluten Free Crawler
    Disallow: / 禁止Gluten Free Crawler访问网站的任何部分