文件状态良好,请查看下面具体的报告。

    规则 解释 有效
    User-agent: AhrefsBot 开始配置:AhrefsBot
    Disallow: / 禁止AhrefsBot访问网站的任何部分
    User-agent: BLEXBot 开始配置:BLEXBot
    Disallow: / 禁止BLEXBot访问网站的任何部分
    User-agent: Amazonbot 开始配置:Amazonbot
    Disallow: / 禁止Amazonbot访问网站的任何部分
    User-agent: DotBot 开始配置:DotBot
    Disallow: / 禁止DotBot访问网站的任何部分
    User-agent: MJ12bot 开始配置:MJ12bot
    Disallow: / 禁止MJ12bot访问网站的任何部分
    User-agent: SemrushBot 开始配置:SemrushBot
    Disallow: / 禁止SemrushBot访问网站的任何部分
    User-agent: GPTBot 开始配置:GPTBot
    Disallow: / 禁止GPTBot访问网站的任何部分
    User-agent: DataForSeoBot 开始配置:DataForSeoBot
    Disallow: / 禁止DataForSeoBot访问网站的任何部分
    User-agent: AwarioBot 开始配置:AwarioBot
    Disallow: / 禁止AwarioBot访问网站的任何部分
    User-agent: * 开始配置:所有搜索引擎
    Disallow: /*.htm?* 禁止所有搜索引擎访问*.htm带任何参数的页面
    Disallow: /*.php?* 禁止所有搜索引擎访问*.php带任何参数的页面
    Disallow: /*.html?* 禁止所有搜索引擎访问*.html带任何参数的页面