文件状态良好,请查看下面具体的报告。

    规则 解释 有效
    User-Agent: * 开始配置:所有搜索引擎
    Disallow:/*?usid=* 禁止所有搜索引擎访问所有带参数为usid=*的页面
    Disallow:/pay/ 禁止所有搜索引擎访问/pay目录
    Disallow:/vip/ 禁止所有搜索引擎访问/vip目录
    Disallow:/down/ 禁止所有搜索引擎访问/down目录
    Disallow:/weapi/ 禁止所有搜索引擎访问/weapi目录
    Disallow:/peiyue/*_* 禁止所有搜索引擎访问/peiyue目录下包含_的文件
    Disallow:/yinxiao/*_* 禁止所有搜索引擎访问/yinxiao目录下包含_的文件
    User-agent: Bingbot 开始配置:Bingbot
    Disallow:/*?usid=* 禁止Bingbot访问所有带参数为usid=*的页面
    Disallow:/pay/ 禁止Bingbot访问/pay目录
    Disallow:/vip/ 禁止Bingbot访问/vip目录
    Disallow:/down/ 禁止Bingbot访问/down目录
    Disallow:/weapi/ 禁止Bingbot访问/weapi目录
    Disallow:/peiyue/*_* 禁止Bingbot访问/peiyue目录下包含_的文件
    Disallow:/yinxiao/*_* 禁止Bingbot访问/yinxiao目录下包含_的文件
    Crawl-delay: 100 允许Bingbot访问100目录(包括子目录)
    User-agent: AhrefsBot 开始配置:AhrefsBot
    Disallow: / 禁止AhrefsBot访问网站的任何部分
    User-agent: megaindex.com 开始配置:megaindex.com
    Disallow: / 禁止megaindex.com访问网站的任何部分
    User-agent: SemrushBot 开始配置:SemrushBot
    Disallow: / 禁止SemrushBot访问网站的任何部分